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0000001-1000Аеаіѕ=0000005000000000000000050000000 
О005ТАІМСО0000015Т000005ЕТО0000НАЅНО000025ЕТ0000 
О0000006еаіѕОО0050000000000рЕЦЈТҮРЕПАЕМАМЕрОО00000 
КеаіѕОПО000000000000000003000Аеаіѕ$=00000000000000 


оррбробоборовеаї  П5ТВІМеПІ 15 ТОНАЗНОЗОДООООО00000 
ОООД00000000000000000000000005еплапіїсЗ ДОПОООО000000 
О00000000000000000000Аеаіѕ$П5ЕТП25ЕТОО00000006еаіѕП00 
О00000000000000000000000000000001-2000Аеаіѕ000500000 
UUUUUUUUUUUUUUUUUUUUUUU 


01-2 Кеа 05000 


0000 000000 0000000 


ОО0000000000000000000000000 
STRING | О0000000000000 О000000іпсгетеп 0000 
Паесгетеп ПОП 











0000 000000 0000000 


ОО0000000000000000000000000 
D000000000000000000000 0 |ОєгіпоООООООДДО000000000000000 
U 











О00000000000чпогаегеа 
| 00000000000000000000000000 
соПесііопо000000000000000 
О00000000000000000000000 
000000000 


HASH | 00000000000 ПО0000000000000000000 














000000тетоюег0000000 
ОѕсогеПО00000000000000000 


О0000000000000000000гапд9ерб 








0000000 
00000 





OOOO ООО000000000000000000000000000000000000000 
0000 3 0000000000000000000000000 Redis QO000000 
http://redis.io/commandsin 


О000000000Аеаіѕ=0050000000000Аеаіѕ0000000000000000 
О00000000000000000000Рупопробоо000000000А0000000000 
ОАеаіѕ$000000000000РуєопО000Руһопр000Аеаіѕ$000000000 


оробороррорвеаїх ПРуспопОгеді5-ру ОДОО0О00000000000000 
ОДО00000 


UUURedisUPython  ОПОООДОООДОО0О000000А00000000 
Redis[]Python[ ОДОДОДООДАООДООДОДООООДОООООДОДО0О0000000000 
00000 0ебіапПороооорОО0000000РЕЄр.//геаїіз. іо/домупіоаа П 
веаїє)000000000000таке && sudo таке іп5 а 00000 
sudo python -m easy install redis Ппігеді5ППігедї з ПП 
ороборорероророорвеаї 0000 


О00000000000000000000000000000000Руһопр0000000 
Руєпопо0000000000000000000000006еаіѕП000000000000 
РУЄпопПДОООООО000000000 


0000000000000 О000000000000000Руєһопро000000000 
КибуПППШамаП П/амавспір ППППППИІПИППҺЕ р5://9 Ећиб.сога/ 
јоѕіаһћсагіѕоп/геаіѕ-іп-асіопО000Рућоһ0000000000000000 
UUUUUUUUUUUUUDUU 


О0000000000000000000000Руєпопо000000000000000000 
О0000Аеаіѕ$В0000000000006еаі$П00000000000000Руһоп00 


ПО00000геаіѕ-сіі0000Аеаіѕ$П000000000000000Аеаіѕ$ 0000000 
STRINGO 


1.2.1 ВеФіѕ [1] 


Кеа ППОДОДОДОО000000000000000000000000000000000 
О000000000кеу папедрдооророробоо0000000000001-1000 
hel ТорбООмо г .400000000000000000000 


键 名 值 的 类 型 
hello ©— string 
world 

值 


01-1 П05ТАІМСО0000һе11о000мог1а 


О0000000000000000000006ЕТО000005ЕТО000000Е:000 
О000000000000А000000000Аеаіѕ00000000001-10000000000 
геді5- СПЮДО5ЕТПСЕТООЕТО01-300003000000000 


Il-3 00000 


0000000000 


«й 0000000000 


ПОО0000000000000000000000 








00001-1  5ЕТОСЕТООЕЄТОООДО 


SET РУТЕРА 


БОКИ OK, Python 


«0.0. 


0.0. 


0.0 


1 


0.0. 


$ redis-cli 
客户 应 会 将 这 个 ОК redis 127 
转换 成 True, –> OK 

redis 127. 
获取 存储 在 键 hello 中 И кім 
的 值 。 redis 127. 

—> (integer) 

redis 127. 
在 对 L=. 行 删除 的 时 (nil) 
(iż, 命令 将 返回 被 redis 127. 


SBI 值 的 数量 。 


ПО redis-cli 


0.0. 


:6379> get hello 


a 


16379» set hello world 


:6379» 


ФР. 


月 动 redis-cli 
将 键 hello 的 值 


q ЖЕЛ world, 


键 的 值 仍 然 是 woz13a， 跟 我 们 刚 


| 才 设 置 的 一 №. 
:6379> del hello зо - 删除 这 这 个 键 值 对 。 
:6379» get hello < 因为 键 的 值 已 经 不 存在 , 所 以 党 


试 获取 键 的 值 将 得 介 一 个 гії, 
Python РЕНЕ! nil 转 
换 成 None。 


000000000000000 Redis БВО00000000геаіѕ- 
cliDOU000000000RedisUDUU 


ООДОСЕТОЗЕТОВЕСОДОДОДРОВеаїЬОООДОООДОООДООО00000 
ОО000000000000000000000000000000000000030000000000 
О00000000000000000000000000000АеаіѕП0000000 


1.2.2 Вес!5 | DDO 


Кеа 50000 пкеаі- Пі5Є0ООДОДОД00000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
Ор00000002-200000000000 


键 名 值 的 类 型 


у ; 


ist-key ——— list 





item 
item2 


item 


列表 包含 的 元 素 ， 相 同 元 素 可 以 重复 出 现 


01-2 List-key00U000300UU00D0000U0U0D0UU0UO0U00DDU0 





RedisUU00000000000000000UUUUUUUUULPUSHUUURPUSHOUDUD 
UU000000UUUUUUieft еларррориоће епа РОРПОПАРОРПОООО 
UUUUUU00000000UULINDEXDOUU00UUUUUUUUUU0000UULRANGCEDUOUDD 
UUUUUU0000000000UUUU1-200000000UUUUUUUU1-40000UUUUUU 
000000 


01-4 0000 


0000000000 
0000000000000 


О00000000000000 
ООО00000000000000000 


ПППП1-2 RPUSHOLRANGEDLINDEXDLPOPOOODO 


redis 
(іпседек) 1 
redis 127.0. 
(integer) 2 


redis 127.0.0.1:6 


(integer) 3 


使 用 0 为 范围 的 
EAn, 
为 范围 的 结束 
索引 , 可 以 取出 


w N 


"item2" 


222.02 0318 


о 


redis 127.0.0.1: 
i) 'item' 

) Ħitemż' 

J пеш" 

әб 


redis 127.06.0.1: 


rpush list-key item 


3 rpush list-key item2 


)> rpush list-key item 


lrange list-key 0 -1 


> lindex list-kev 1 


79» lpop list-kev 


列表 包含 的 所 redis 127.0.0.1: 
右 元 素 "item" 
і redis 127.0.0.1:637‹ 


1) "item2" 
2) 'item' 
redis 127.0. 


163/7395 


lrange list-kev 0 -1 





fejn ЯКІ А 7727 
后 , 该 全 令 会 返回 列表 当 

| 前 的 长 度 

A 

| | 在 向 列表 推 人 新 元 素 
之 后 ， 该 命令 会 返回 
列表 当前 的 长 度 。 
je LINDEX 可 以 从 列表 里 
| 面 取出 单个 元 素 。 

M B рій л, 


被 弹出 的 元 素 将 不 再 存 仕 于 
列表 


UURedisUUUUUUUUUUUUUUUUU0000000000000000RedisUUDUD 
000—==000000000000Аеаіѕ$ПО00000000000000000000000000 


ООД000000000000000000000000000000000000000000000300 
О000000000000000000000000АеаіѕВ000 


1.2.3 RedisijijL) 


Redis ПОООООО000000000000000000000000000000000000 
ОДООООД0000000000000000000000000000000000000000000 
ОО0000000000000000000000002-З00000003000000000 


BE 值 的 类 型 


N 人 





各 不 相同 的 元 素 ， 无 序 排列 


01-3 set-key000003000000D 





О0Аеаіѕ00000000чпогдегеароо0000000000000000000000 
ООО00000000000000000000000000005А00О000000000000000 
ЗВЕМОДДООДОООДО0000000000515МЕМВЕВОООДООДООООООООДОДОДО 
ОООДОО05МЕМВЕВ5ОООДООООООООООДОО0000000000000 
ЗМЕМВЕК5ОДООООООДООО0ОД00000000000000001-3000000000 
ОДД00002-50000000000000000000 


00001-3 SADDIJSMEMBERSISISMEMBEROSREMODOOO 


redis 127.0.0.1:6379» зада set-key item | 

(integer) 1 тәш, Ала УК ДЕ 
redis 127.0.0.1:6379» sadd 5ес-Кеу item2 在 尝试 将 ee le іч 
eed 候 , 命令 返回 1 表示 这 个 元 素 被 成 功 
redis 127.0.0.1:6379> sadd set-key item3 地 添加 到 了 集合 里 面 , 而 返回 0 则 表 
(integer) 1 示 这 个 元 素 已 经 存在 于 集合 中 。 
redis 127.0.0.1:6379> sadd set-key item 

(integer) 0 

redis 127.0.0.1:6379> smembers set-key 获取 集合 包含 的 所 有 元 素 将 得 到 一 个 由 元 
тое 素 组 成 的 序列 ，Python 客户 端 会 将 这 个 序列 
2) "item2" 转换 成 hon 集合 

3) "item3" Python RE o 

redis 127.0.0.1:6379> sismember set-key item4 检查 一 个 元 素 是 否 存在 于 集合 
(integer) 0 ни А 
redis 127.0.0.1:6379» sismember set-kev item P, Python 客户 端 会 返回 гр 
(integer) 1 尔 值 来 表示 检查 结果 。 

redis 127.0.0.1:6379» srem set-key item2 

(integer) 1 在 使 用 命令 移 除 集合 中 的 元 素 时 ， 
redis 127.0.0.1:6379» srem set-key item2 命令 会 返回 被 移 除 元 素 的 数量 。 
(integer) 0 i 

redis 127.0.0.1:6379> smembers set-key 

1) 'item' 

2) "item3" 

redis 127.0.0.1:6379> 


01-5 [HII 


0000000000000 
ПОСОООО000000000000000 


ПО00000000000000000000000000000000000000051ҸТЕА0 
ЗОМІОМП501РРОЗОДОООООДОООДОООД0ОД00000000000030000000 
D00000000000000070000000000000000000000000000Redis00 
О50000000000000000000000000Веаїь 0000 











1.2.4 Веадї5 ЦП 


Кеа ППОДОДОД00000000000000000000000000000000000 
ООДОО0000000000000000000000000000024400000000000000 
00 


键 名 值 的 类 型 


S 


hash-key د‎ hash 


sub-key1 ı маџе1 


sub-key2 ı value2 





各 不 相同 的 键 ， 与 键 天 联 的 值 
无 序 排列 


01-4 һаѕһ - кеур0000000000000 





О000000000000000К6еаіѕ00000000000000000000001-400 
О000000000000000000000000001-60000000000000000000 


00001-4 0 Н5ЕТОНСЕТОНСЕТАТ І ДНОВІЛОООО 


redis 127. 


(integer) 


redis 127. 


(integer) 


redis 127. 


(integer) 


redis 127. 


O O FE O b O 


0. 


49 


.0 . 


«0. 


0. 


1) 'sub-kevi' 
2) "valuel" 
3) "sub-key2" 
4) "value2" 


redis 127. 


(integer) 


redis 127. 


(integer) 


redis 127. 


"уајме1" 


redis 127. 


0. 


0. 


25% 


.0. 


0 


1) 'sub-kevi' 
2) "уаїшеї" 


HSET 


1 


H 


> 


4 


= 


14 


= 


ю 


:6379» 


:6379» 


:6379» 


:6379» 


:6379» 


:6379» 


:6379» 


:6379» 


hset hash-key sub- 
hset hash-key sub- 
hset hash-key sub- 


hgetall hash-key 


hdel hash-key sub- 
hdel hash-key sub- 
hget hash-key sub- 


hgetall hash-key 


01-6 


kevi valuel 
kev2 value2 


Кеу1 valuel 


key2 
key2 


key1 


0000 


ОО000000000000 


:尝试 添加 键 值 对 到 散 列 的 
时候， 命令 会 返回 一 个 值 来 
表示 给 定 的 键 是 否 已 经 存在 
| 于 艇 列 里 面 。 


在 获取 散 列 包含 的 所 有 键 值 对 
М, Python 客户 端 会 把 整个 散 
列 转换 成 一 个 Python 字典 。 


在 删除 键 值 对 的 时 候 ， 命 令 会 返回 一 
个 值 来 表示 给 定 的 键 在 移 除 之 前 是 否 
存在 于 散 列 里 面 。 


| 从 散 列 里 面 获取 某 个 键 的 值 。 


UU00000000000RedisUUUUUUUUUUUUUUD0000000000000 
О0Аеаіѕ00000000000000000000000000000000000000000000 


ОДО00000000000000000 





D000fiel dg000000000000Redis0500000000000000000 
1.2.5 Веадї5 [1] 


ОООД000000000000000000000000000п'егбегрор000000 
ОООД00000000000/0 05 согерророрордоророродрвеаї 0000000 
ООДОД0000000000000000000000000000000000000000015500 
ОДООО000000000000 


键 名 2 类 型 
zset-key —— zset 


member1 


member0 





分 值 成 员 ， 根 据 相关 联 分 值 ， 根 据 数 字 
的 分 值 进行 排序 大 小 进行 排序 


01-5  25еє - кеу дООДОО0000000000 





ОАеаіѕ$ПООООООО0000000000000000000000000001-50000 
О0000000002-70000000000000000000 


00001-5 ZADDIZRANGEJZRANGEBVSCOREJZREMDOOOI 


redis 127. 
(integer) 
redis 127. 
(integer) 
redis 127. 
(integer) 
redis 127. 
1) "member1" 
2) "728" 

3) 'memberp' 
4) "982" 


0. 
1 
0 
1 
0. 
0 
0 
1 


redis 127.0.0. 


1) "member1" 
2) "728" 


redis 127.0.0. 


(integer) 


redis 127.0.0. 


redis 127.0.0. 


0 
1 
0 
(integer) 0 
0 
0 


1) "member0" 
2) "982" 


cO L: 


«9.12 


0.1:6379» 
6379» 
0.1:6379» 


6379» 


:6379» 


о 
H 


:6379» 


:6379» 


:6379» 


тада zset-key 728 member1 
在 尝试 向 有 序 集合 添加 元 素 
zadd zset-key 982 member0 的 时 候 ， 命 令 会 返回 新 添加 元 
素 的 数量 。 


zadd zset-key 982 тетђеко 


| 在 获取 有 序 集合 包含 的 所 有 元 素 
时 ， 多 个 元 素 会 按照 分 值 大 小 进 
行 排序 ， 并 且 Python 客户 端 会 将 

| 元 素 的 分 值 转换 成 浮 点 数 - . 

zrangebyscore zset-key 0 800 withscores 
用 户 也 可 以 根据 分 值 来 获取 有 
序 集合 中 的 一 部 分 元 素 。 


在 移 除 有 序 集合 元 素 的 时 候 , 命令 会 返 
回 被 移 除 元 素 的 数量 。 


zrange zset-key 0 -1 withscores 


zrange zset-key 0 -1 withscores 


zrem zset-key member1 


zrem zset-key member1 


01-7 000000 


ZADD 


ZRANGE 


ZRANGEBVSCORE 


ОДОО00000000000000000 


ОДОО0000000000000000000000000 


ОДОО000000000000000 











ОДОО000000000000000000 


UU00000000000000000000000000000U0000UURedisU0020 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
LLLILLILLLILLILU 


1.3 (jjRedis 


урвеаї ПООЗОО00О00000000000000000000000000000000 
ОООД00000000000000000000000000000000000000001-6000 
redditD001-7000stackoverfiowUUUUU00000000000000000000 
UUU000000000000000000000000000000000UURedisU0000000 
UUUUUUUUUU 


Û reddit mobile R 





| пої | new controversial top saved 





2162 points submitted 5 hours ago Бу aaarghas to funny 


У 


| A. Forever Alone: spring break edition (imgur.com) 





се „ Æ, Glowstone driveway (їїтдигсот) 
通过 单 击 上 下 得 头 1740 points submitted 5 hours ago by 
来 对 文章 进行 投票 L, icametodropbombs to pics 








A. I won the Master Sword and Hylian Shield 
from the Skyward Sword commercial. They 
У arrived today. (x-post from r/zelda) 


(imgur.com) 





274 
Фк 
є 
21 
ро = 


1696 points submitted 5 hours ago by Grant638 to gaming 








“Ам. Where is your god now? г ітдиг.сот) 
1168 points submitted 4 hours адо Бу justonecomic to WTF 








І Decided To Consume Only Conservative News 
— Sources For А Week, Here's What | Learned (self) 


чу 1537 points submitted 6 hours ago Бу Googlepus to politics 
Ag | 











01-6 Веда ОО00000000000 


= Stack Overflow Y 


Questions Tags Users Badges Unanswered Ask 


用 户 可 以 在 | All Questions order by week = 
浏览 问题 的 == : 
x O 7 2 
同时 ， 对 问 га идеал Ја braces іп C++? 
题 以 及 问题 13 一 есе — 
已 有 的 答案 оно ЗУБУ 
МАЊА Ал ан 
进行 投票 21 Why is 0 + 1 = 22 [closed] 
- php | math | орегаїоггргеседепсе 
= interjsy 
54 Different results with Java's digest versus external Utilities 
“ss java | md5 sha digest 
Jon Skeet 
What happens if І define а 0-сіге array іп С/С++? 
Matthieu M. 
27 what does the error mean when І am compiling c++ with g++ 
"ss complier? 
С EQOr compiler-errors 


Rafat Наміокі 





П1-7 StackOverflow пПОДОДООДООДОГО 
1.3.1 0000000 


ОДООДО0000000000000000000000000000000000000000000 
UU2000000Uup уосербооОООО0000000000000000000000000 
10000000000050000000000000000000000000050000000000 
D010000000000000000000000000down voter ILU 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 


ILU 


О000097С00197001010000000000000000000000000000 
Unix БОО0000009піхоророброррорбо00веаїб рроророророродоб 
О0000000000000000000000000000000043200000000000000 
086 40000000000000000000020000000000000000000000000 
00000043200 


ОО000000000000000000000000Аеаіѕ$П0000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООД0000000002-800000000000000000000 


агісіе:92617---------- hash 


Go to statement 
considered harmful 


http://goo.gl/kZUSu 


user:83271 
1331382699.33 
528 





01-8  ДО0000000000000 





О00000000. 0000000: О00000000000000 1-8 00000 
агііс1е: 9261710000000000агёіс1е10001009261700000000 
О00патеѕрасер100: О09000000000000000006еаіѕП000000000 
00000000000000000 . 0080007 П000000000000000 | 0000000000 
ОДООООД0000000000000000000000000000000000000000000 


ОДОООД00000000000000000000000000000000000 1900000 
UUUUUUUUUUUUUUUUUUUUUU ІФ9000000000000000000000000000 


ООДОО00000000000000000000000000000001-9000000000000 
0000 
time: zset — score: Dzset 
article:100408 | 1332065417.47 article:100635 | 1332164063.49 


апісіе:100635 1332075503.49 апісіе:100408 | 1332174713.47 
апісіе:100716 | 1332082035.26 article:100716 ! 1332225027.26 








根据 发 布 时 间 排序 文章 的 有 序 集合 根据 评分 排序 文章 的 有 序 集合 


01-9 00000000000000UUUUUUUUUUUUUU00000 





UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О00000000000000000000000000010001-100000000000000 


voted:100408 


ивег:234487 
user:2533/8 
user:364680 


set 





user:1 32097 
user:350917 


01-10 )100408000000000000 





ОДООД0000000000000000000000000000000000000000000 
ОДОООО0000000000000000000 


ООО00000000000000 1-1100000000115423010010040800 
ОДООО000000000000 


score: ---  TN—N-" zset score: --- T o x zset 


апісіе:100635 | 1332164063.49 article:100635 1332164063.49 
article:100408 1332174713.47 article:100408 1332175145.47 





article:100716 | 1332225027.26 article:100716 1332225027.26 


100408 号 文章 得 到 了 一 张 新 的 支持 票 ， 它 的 评分 增加 了 








voted: 100408 set voted:100408 一 > > set B 
user:234487 user:234487 
user:253378 user:115423 
user:364680 ивег:253378 


изег:1 32097 
user:350917 


user:364680 
user:132097 





115423 号 用 户 会 被 追加 到 对 100408 号 文章 的 已 投票 用 户 名 单 里 面 


01-11 01154230000100408000000000000000000 





ОДООО0О000000000000000000000000000000000000000000 
ПО000000000000000000000000000000025С0КЕПО0000000000 
ОДОДООО0О000000000000000000000000000000000000000000 


ЅАРООО000000000000000000000000000000000000000000000 
О000000000000000000214С6ВҮр00000000043200213САВҮПО0 
О00000000000000000000091МСАВҮО0000000000000000 
ОНІМСАВҮПООО00000000000000000001-60000000000000 


00001-6 article уо+е() [0 


ONE WEEK IN SECONDS = 7 * 86400 


мо Sid 准备 好 沉 要 用 到 的 常量 
PN <. = ја 


det article vote(conn, user, article): 计算 Жа Ы ОА M. 
уні = i ا‎ pi =ч و‎ тыста < i 检查 是 否 还 可 以 对 文 
ar COMU: ZSCOTOI ime:', агсіс e) < СШЕСІТ: 章 进 行 投票 (虽然 使 用 
return i EL AP e 
ол n] 以 获取 文章 
article ій = article.partition(':') 1-11 « 的 发 布 时 间 , HA ВЕЕ 
i (TVeteG: i i у ka e а 
if gonn. вано | vot + art се Ya, VASE) MEN 合 返 回 的 文 音 发 布 时 
conn.zincrby('score:', article, УОТЕ SCORE) ӘРЕ ӨТЕ 
conn.hinerbv(article, 'votes', 1) 间 为 浮 点 数 , 可 以 不 进 
yr ОЙ у 
йж а ЈЕ КОРА Ж ТАНАЕВ), 
章 投票 , 那么 增加 这 篇 文 章 的 рни 
投票 数量 和 评分 ( identifier ) 里 面 取出 文章 
211% =. 2 с 
的 ID。 





Кейі ЛГ  ПОДОДООДО0000000000000000002-60005А000 
ZINCRBYDHINCRBYD300000000000000000000000040000Redis 
ОДООО000000000000 
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1.3.2 0000000 


ООО0000000000000000100000000000000000сочпёег00 
ІМСАОООООО000000005АРОПО000001РОО000000000000000000 
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ООДО00000НМ5 ЕТОДОООООООДОООДОО002А9000000000000 
[initial зсогеДДООДОО000000000000000000002-700000000000 


00000 


00001-7 post агёїс1е() 0 


def post_article(conn, user, title, link): 
article іа = str(conn.incr('article:')) 


voted = 'voted:' + article id 
conn. sadd(voted, user) 
conn.expire(voted, ONE WEEK IN SECONDS) 


now = time.time() 
article - 'article:' 4 article id 





< 一 生成 一 个 新 的 文章 ID. 


一 将 发 布 文 章 的 用 户 添 加 到 文章 的 
已 投票 用 户 名 单 里 面 ， 然 后 将 这 
个 名 单 的 过 期 时 间 设 置 为 一 周 
(第 3 章 将 对 过 期 时 间作 更 详细 的 


conn.hmset (article, { 
'title': title, л). 
'link': link, 将 文章 信息 存储 到 一 个 散 
'poster': user, 列 里 面 。 
'time': пом, 
'votes': 1, 
}) 
conn.zadd('score:', article, now 4 МОТЕ SCORE) TINEA 
conn.zadd('time:', article, now) ab ala 
F "НУ FF A о 


return article id 
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ОООО00000000000000000000000000028Е26УВАМСЕДООДОДООІОО0 
О00000010000096ЕТАС-ЂООО00000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДДОО02ВЕМВАМСЕДОДО"ОДОО00"000000000100000000000001- 


8000000000000000 


00001-8 get_articles()[|] 


ARTICLES PER PAGE = 25 


def get articles(conn, page, окдек='5соке:'): ына „У ын М 

start = (раде-1) * ARTICLES_PER_PAGE 设置 获取 文章 的 起 始 案 引 和 结 
>з 

end = start 4 ARTICLES PER РАСЕ - 1 У, 
ids = conn.zrevrange (order, start, end) < 获取 多 个 文章 ID。 
articles = І) об эе 
for id іп ids: 根据 文章 ID 获取 文章 的 
article data = conn.hgetall(id) у 详细 信息 。 
article datal'id'l = іа A 根据 文章 ID 获取 文章 的 详 
articles .append(article data) | 细 信 息 。 


return articles 


Руєһоһ 0000000000 00001-8009еб articles ( ) 000 
огаег00000000$соге : ПРућопро00000000*00000”00*000000 
ОООО000000070000000000000000000000000000000000000000 
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UDODhttp://mng.bz/KMS5x0 


ОДООО0О000000000000000000000000000000000000000000 
ПО000009гоиро00000000000000000000000000000*00000"00 
00000"00"700000009амаро" О00000000*Аеаіѕ= 00” 00000000000 
UUUUUUUUUUUUUUUUUUUUUUUD 
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00001-9 add гетоме дгоир5()ПЛ 


def add гепоуе groups(conn, article id, to ада- |), to гетоуе- (1): 


4 = larti 2. ti і а => = 
article 'article: + article_id 构建 存储 文章 信息 
for group іп to_add: 的 键 名 

conn.sadd('group:' + group, article) 4 JEA o 
for group іп to remove: 

conn.srem('group:' + group, article) 4— B 

将 文章 添加 到 它 所 属 的 群 
Р, i Е 
从 群 组 里 面 移 除 文章 。 sN. 


ОДООО0000000000000000000000000000000000000000000 
000000000000000000Redis0000000000000000000000000000 
UUUUUUUUUUUUDU 
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ОООО00000000000000010000000000000000000000 
ЛІМТЕВ5 ТОКЕОООООДООООООДООДОО0ОООО000О000000000000000 
ОДОООО0000000000000000000 


U l-12 ООООДОДОО000000000000000000000000000 
ZINTERS ТОКЕОООООДОДОООООДООД0ОД0000000000000000000000 
000000 










groups:programming set score: zset score:programming zset 


гета: 02617 181 ETT 
article:83729 1330425826 28 


article: 100408 SAL ЖШ 
апісіе:83729 <J article:92617 1331147511.67 
article:100635 ! 1332164063.49 Е 


апісіе:100408 1332174713.47 
article:100716 1332225027.26 

















апісів: 83729 | 1330425826.28 
article:92617 1331147511.67 
article:100408 1332174713.47 
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ООО000000000000000005 core: ргодгаттіпд  00000000000005 со ге : 0000000000 
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1-10000000000000000000000 


00001-10 get group articles()(II 


J ti ЖЁН ІМ 





def get group articles(conn, group, page, order-'score:'): 每 种 排列 顺序 
key = order + group <} 部 创建 一 个 键 。 
if not conn.exists(key): < ул ножева ди тећи не EŻ 
conn.zinterstore (key, 检 бы AL | 5 的 排序 结果 ， 
['group:' + group, order], MRA НУ МЕН ЕВЕ o 
З ЈЕ ТЕ 2] пі, egates'max', е қ ЖЕТ 
1... f PEE AA 让 Redis ТЕ 60 秒 之 后 自动 删 
fi ABH. , зу ЕЛЕН, 
对 群 组 文 音 conn.expire(kev, 60) 除 这 个 有 序 集合 。 


调用 之 前 定义 的 дет articles() 


ИЕ ог return get articles(conn, page, key) < 
ШЕНІ?» BERS алд 
KRR HETA ЈА ЭРЕН ЭС ОЙЫ. 
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article уоїе() ППООО00004ІМСАВҮППООО00000000000000000 
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0707 ОПО" О0000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
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ОДОО000000000 
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UUUUUUUU0000000UUUarticte vote()UUUpost_ article() 
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ПО0000000000000000000000000000000000000000000003 
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1.4 (ILL 


Дрррокеаї рООДОООООО0б0000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


О0000000000000000000000000000000000Маппіперо000 
ПООООбОО http://www.manning-sandbox.com/forum.jspa? 


Гогиті0 - 8090ДОД000О000000000000 


DO0000000Redis0000000000000000000000000000000000 
Веаі$0000000000һрѕ://9гоирѕ.доодіе.сот/д/огиту/геаіѕ- 
ао/00000000000Аеаі 000000000 


О0800000000000000000000000000000006еаіѕП00000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


D000ePUBw.COMDUUUUePUBw.COM ПОД 
UUUUUUUUUUUUU 


1.5 |! 


Орб«еа 5 рорОДОО000000веаї оророббобооборобо0000000 
О0000Аеаіѕ=0000000000000000000000000000000000000000 
D0000000000000000000Redis0Q0000000000 


D0000000000000000Redis000000000000000000000000000 
D00000000000000000Redis00000000000000Redis0000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU0000000000”“0000000000000U0UUU "DUOUUU"DUUURedisDDD 
ОДО000000000070 


UUU002000UUURedisUuUWeb0000000000000000000URedis 
UUUUUUU 
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@ 00000memcachedUUUUUUUUUUUUUUUURedisUUUUUUUUU3D 
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UUUU0000000000memcachedUUUUUUUUUUU 


D0DDePUBw.COMI TINePUBWw.COM ПОД 
UUUUUUUUUUUUU 


[2] DURedis[ ]Web|||[] 


UUUUUU 


e ППсоокје 
e ГППсоокіе 
• 0000000 
e 000000 

e 00000000 


О000100Аеаіѕ$ПО000000000000000000000000000000000 
О000%еоо000000000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
Кеаіѕ$00000000000003000Аеаіѕ= 00000000000 


О0500000000%еБроо000нТтТтРоОО00000000000000000000 
UUUservice0000Web000000000000000000 


О100000000000000геачеѕ 000000 
02000000000000000О0О0ћапа!ег 0 


ОЗО0000000000000000 


0400U0000000UUUUUtemplate00UUUUrenderDU 


050000000000000000000000000гезропз5ер 


ОДОО05000000000000000У/еб ПОООООО00000000М/еб0000 
LL 05 саєетев5 ОДОООДОООД00О000000000000000000000 
Па ООООДО000000000000000000000000000000000000000000 
О050000000000000000000000000Аеаіѕ=0000000000000000000 
Орб«еа 5 00000000000000000000000 


UUUU0000000000000Fake Web Retaileri ОДОДОО0000000 
ОО000000000005000000000000000000001000000000000010 
О0000000000ғаке Web ВеваїегобрООО00000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
О00000000ғаке Web RetailerU000D00D00000UUUUUUUUUUUUUUDUU 
UUUU0U0000000000000000cBO00RedisUU00000000000000000 
UUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU0000000000000000000RedisU0000000000000000000DUD 
OUL 


О050000000000000Кеаіѕ=00000000005$еѕѕіоп0 


ПррђеРовм. сОМІДДДерРувм. СОМ ПОД 
О000000000000 
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ОДООД0О00000000000000000000000000000Ос0р09кіер0000 
уЮДрООсоокіе ПД ПОООООО000000000000000000000000000000000 
ОД00000000Осоокіеороробо0000000000Осооскіе ррД00000 
П5ідпеадсоокіе 00000 СокепПсооке 


Дреоокіе ПОДООООД00000001900000000000000000000000 
ОООД000000000000000000Ососкіепророборобороророрбо00000 
ОДО000000000000Осоокіе ПДбб000000000000 


ПП соокіеППсоокге ПОДД000000000000000000000000000 
О00000000000000000000000002-100000соокіе000соокіер00 
0000 


02-1 [| cookie[|[ I ]cookiel IEEE 


DuUcookie00000UU0000cookieUUUcookie | ПООО000000000000000 
О000000000адаіопаі! іпғотаїіоп0000 | П0900000000000000000 








000000000000 








ОДОО000000000000000 





О00000000соокіе00000000000000000 
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00000000 





cookie | 000000000000 
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Web КекаїегОПОПОДОДОО0О0О00000000000000000000000000 
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020002000 ПОООООДОДООООООООД0О0000000000000000000000 
ОДООООО0000000000000000000000000000 


ППҒаке Web Retailer 000000000000—=—000000000 1 2000 
ОДО0000000060000р00000000001000000000000000000000000 
0UU00000UURedisUUUUUUcookie000000000000000000cookieUUbU 


UU000000000000000cookieUUUUUUUUUUUUUUUUUUUUUUUUD 
ООДО00000000000000000000000000000000000000010000002- 
1у)ро0000Осоокіедр00 


00002-1 check token(j)ill 


尝试 获取 并 返回 令 牌 


def check token(conn, token): ж 4 
СЇ ШР, 


return conn.hget('login:', token) 


ОДООООО00000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
О00000000000000002500000000000000000002-20000000000 
OOU 


00002-2 update token()|[I[] 


def update_token(conn, token, user, item-None): 
timestamp = time.timef) 4 K ШІНШІ. 


conn.hset('login:', token, user) < ай А 
维持 令 牌 与 己 
cenn.zadd('recent:', token, timestamp) а ен 27 
if item: 登录 用 户 之 问 
—> conn. zadd ('viewed:' + token, item, timestamp) Пе А ри 
记录 用 户 > conn.zremrangebyrank('viewed:' + token, 0, -26) арени 
> ЖӘ”; £ жа t GAS E 7" 
浏览 过 的 移 除 旧 的 记录 ， 只 保留 用 户 次 中 现 的 时 间 |。 
ШІ 最 近 浏 览 过 的 25 个 商品 ， 


DDupdate_token( ) ПП000000000000000000000000000000 
D000000000000000000000Dupdate_token ()000000000020 
000000000Fake Web КегаїегоПОДОДО060000Д000030000000000 


ОДО00000000000000000Пирдаєе token ( ) 0000000000000000 
ПППырдате +океп ( ) ООДО000000000000000000020010001 


ОДООО0000000000000000000000000000000000000000000 
О00000000000000000100000000°00000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОД0000010000000000000000000000000000000000000000000 
ОДОДООО000000000000000000000000000000000000000000000 
100000000000000002-З0000000000000000 


00002-3 clean ѕеѕѕ1іопѕ ( ) 0 


QUIT = False 
LIMIT = 10000000 


def clean sessions (conn) : ИШ НИО 778 
while пос QUIT: 的 数量 
size = conn.zcard('recent:') ли 


if size <= LIMIT: 
time.sleep(1) 


x< 
令 牌 数量 未 超过 限制 ， 休 眠 
并 在 之 后 重新 检查 。 





continue 
end index = min(size - LIMIT, 100) | RMT ЕЙ 
tokens = conn.zrange('recent:', 0, end іпдех-1) | ID, 
session_keys = | м рана чно қысқада 
у ы 为 那些 将 要 被 删除 的 令 牌 
for token in tokens: вену 
session_keys.append('viewed:' + token) 构建 键 名 ， 
conn.delete (tsession keys) 
conn.hdel('login:', *tokens) Же HIP A f 


conn.zrem('recent:', *tokens) 
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ОД5000000000000000000000000000000000000000001000000 


О00000000000000000000024 x 3600-86 400000000000005 
000 000/86 40058 ПД0О000000000000000000000000000000 
ООД000000000000006000000000000000000000000000000000 
О0000000000000000000010 Ос000000000000000000060 000 
О000000000000000150010000Д0000000000000000000000000 
00 


UUUUUUUUUU  00000000000002-300000000000000002-30 
О000000000000000000000000сгоп јоео0050000000000000000 
О0000000000006.3000000000000000000000000000000000 
while not ОЧІТ:рООООООООООО000000000000000000000000 
О000000 


Руєһоһ 000000000000 00002-30003000сопп. delete 
('vtokens ) П0000000000000000000000000000000000000000 
О0000000чпраско000000000000000000000000000Руєһопр00 
UUUUUUUUNttp://mng.bz/817 W0 


Redis [000000 DDLRedis ДОДООДОДОООБОДОДОДОД000000 
ОООД0000000000000000000000со0кіердроробоД000000000000 
оррброборобордороровеаїПЕХРІВЕООДОООООООООООО0000000 
ОрО00000000Веаї ПООООООДОО0О00000000000000000000000 


ООО000000000000000000000000100000000000000000000000 
ОДОООО000000000000000000 


ОДД00000000000000000000002-З3000000000000000000 
Огасе сопаїгіоПОДДОДООООО000О0000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ООД000000000000000000000000000000000030004000000000 
ОДООДО00000000000000000000 


О000Аеаі$П00000000000000000000000000000000000000 
О000000000000000Аеаіѕ$00%еюо5000000000000000000000000 
ПАеаіѕ$П00000000соокіер 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


2.2 (lljRedisi EE 


000М№еёѕсареП0002000900000000000000соокіе00соокіе 
О00000000000000000соокіеђсоокіер0000000000000мер 
retaileri ОДОООО00000000000000000000Осо2кіеррорб00000000 
ОДООО000000000000 


ОДсоокіе)0000----О00000000000Ососкіепроррб00000000 
ОДОООО00000000000000000000000000000000000000 
ПуаһаағгеПсоокіег Псоокге т ПООДОО00000000000000000 
соокіедПОДОООД00000000000000000сор0кіеророробро0000 
соокіеППОО00000000000000000000000 


О0000000000Кеаіѕ$00000соокіеПоо0000000000000000000 
О0000000000000Аеаіѕ=000000000000соокіе00соокіе І00000 
ILU 


ООДОО0000000000000000000000000000001900000000000 
QO0000000000000WebOQ0000000000000000000000000000000 
О000000000000000000000000000000001РО000000000000000 
ОДООООО000000000000000000000000000000000000000000000 


ОООД000000000000000000000000000002-4Пада to сагі ()0 
ОДОО000000000000 


00002-4 add to cart(jili 


def add to cart(conn, session, item, count): 从 购物 车 里 面 移 除 
从 购 物 车 里 面 移 除 
if count <= 0: P > 
кле еј Гл 
conn.hrem('cart:' + session, item) < 指定 的 商品 。 
else: 
conn.hsst('cart:' + session, item, count) а 将 指定 的 商品 添加 到 购物 车 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
0000000000000002-5000 


00002-5 clean full sessions()(II 


def clean full sessions(conn) : 
while not QUIT: 

size = conn.zcarid('recent:') 

if size «- LIMIT: 
time.sleep(1) 
continue 

end index = min(size - LIMIT, 100) 

sessions = conn.zrange('recent:', 0, end index-1) 


session kevs = [] 
for sess in sessions: 
session kevs.append('viewed:' + sess) 


session kevs.append('cart:' + sess) нею РЕТИ 
新 增加 的 这 行 代码 
conn.delete(*session keys) НІН е 
.Һае1 ('1одіп:', * і we BA 
ge ees خر ہا‎ 应 用 户 的 购物 车 。 
conn.zrem('recent:', *sessions) 
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2.3 1000 
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D0000000000000000000DQavaScript0 
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ПООО00000000000000000000000000000000000"0000" 000000 
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ОД00000 


UU0000000000UFake Web ВКекаїего0000000959е М/еБ III 
ОДООООО000000000000000000000000000000000000000000000 
ОДОДООООО000Д00000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000 


О0000РуёһопО000000000000000000000ауегоо00000000 
0007000 тпіддтематердолд0ріадіпроОООООООООДОДООВеаї5000 
ОДООООО000000000000000000000000000000000000000000000 
ОО000000000000000000000000000000000000Аеаіѕ0500000 
О00000000000000002-60000000000 


00002-6 cache гедиеѕ+ () 00 


对 于 不 能 被 缓存 的 请 求 , H 将 请 求 转换 成 一 个 简单 
接 调 用 回调 函数 。 的 字符 申 键 ， 方 便 之 后 
def cache request (conn, request, callback): 进行 查找 。 
if not сап саспе(сопп, request): 
return callback(request) 





尝试 查找 被 缓存 的 页 而 。 
page Кеу = 'cache:' + hash request (request) < 
content = conn.get (page key) 


Өү AUR R BIŻA ZEA, 


ДЇ Z H- зь перше 
content = callback(request) < 那么 生成 页 而 。 


conn.setex(page kev, content, 300) 
EE HE БЕРУ Л ОТ 
return content 4— 将 新 生成 的 页 面 放 到 


返回 页 面 。 缓存 里 而 。 
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000050 МОП000000000000000)50№000000 2-10000000000000 
00 


gë 类 型 


\ 2 


ІПу:273----------- string 
f'qtv':629, 'name': 

'GTab 7inch", "description": 

о | 








(Е 


02-1 ООООООО000000000000000000000 





ОООО00000000000000000000000000000000005спеамтеп) 
ООДОО0000000001000000000000000000000000000000000000 
RedisU0000000000000delayDUUUUUUUUUUUUUUUUUIPUUDUDOUUUUDU 
UUUUUUUUUUUUUUUUUUDU 


UUsSONDUUUU000 00)5о0мородрорроророрророровеаїьо0О 
UUUUUUUUUUUUUUU00USONOUUUUUUUUUUUUUU0UUUUS2ONUUUUDD 
ОДОДООО0ХМіСоодіеПргобосої биТе ћи В850М | 


MessagePacki ППДОДОДОДОООДОООО0ООО00000000000000000000 
OOO 


000000  ОДОб000000000000000Веаї  ДДООДО00000000 
Дроррр000Кеаї р Оороророброророороророророророророро 
ООООО0000000000000000000000007000000000500000000000 
О00000000000"0000000000000Аеаіѕ$=000000000000000000000 
О00000000000000000000000ѕе г: 1230000000000000000 
ивег:123:ро5 t s ОПДООД0000000000000000000000000)50М00 
О00000000002 10000001 чабр0000000050М0000МевзадеРаск 
ОДОО0000000000 


ООДОД0000000000000000000190000000000000000000000 
ОДТВОДОООДОДО0О00000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О00000000000000000000000000000000000000000000002-70 
UUUUUUUUUUUUUUUDDU 


00002-7 schedule гом сасһе()ПП 


先 设 兽 数据 行 的 
def schedule row cache (conn, row id, delay): 延迟 值 
conn.zadd('delay:', ком id, delay) < аза 


conn.zadd('schedule:', гом id, time.time()) 


| 立 加 允 需 要 缓存 的 数据 行进 和 调度 ， 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО0000000000005900000000000000000000000000000000000 
О00000000000000000000000000000000000000000000000000 
ОДОДОД0000000000019000000000000000000000000000000000 
UU00000UUUUUUUUUUUUUUUUUUUUU000000U2ONUUUUUURedisD 
О0000000000000000000000000000002-8000 


00002-8 ППППППсасһе гомв() 


def сасһе rows(conn): 
while not QUIT: 


next = conn.zrangel'schedule:', 0, 0, withscores-True) < 
дык = hinm мый | E АЕ К-Т 
if not next or пехі [0] [1] > now: 

time sleep. 05) 一 ТІ! ЕНИ, 命令 会 返回 一 


continue 个 包含 委 个 或 一 个 元 组 (tuple ) 的 列表 。 


tow Ча = меже [8] [0] 暂时 没有 行 需要 被 缓存 ， 
PRIR 50 毫秒 后 重 试 。 





delay = conn.zscore('delav:', row id) < НЕ НИЧЕ КУРЕ 
„чени Se, ш 的 延迟 时 间 。 
conn.zrem('delay:', гом іа) РРР EA 
conn.zrem('schedule:', гом id) 不 必 贱 缓存 这 个 行 ， 将 它 从 
conn.delete('inv:' + row id) тА. 
continue 
т ЖЕМ FF Bf [ë 
бон хом = Wnvenbony “get teow 38 < 一 读 取 数 据 行 
EREDI. | conn. чын! schedule:', ком id, now + балау! 
conn.set(!inv:! + го» id, json.dumps(row.to_dict())) 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОО000000000000 


D00000000000000000000Redis0Q0000000000000000000000 
UUUUUUUUUUUUUUUUUUDU 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
UUUUUUUUUUDUU 


2.5 [HII 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000 


0002.1002.2000000000000000000000000000000002.3000 
О00000000%еБро000000000000000000000000000000ғаке 
Web Веёаег000000000000ғаке Web Вебайег)000100 0000р 
ООО0000000000000000000000000000000000000000010 000П 
ОО00000000 


0002. 1000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
update token ()00000000000000002-9000 


00002-9 ППППирдате token()(I 


det update token(conn, token, user, item-None): 
timestamp = time.time() 
conn.hset('login:', token, user) 
conn.zadd('recent:', token, timestamp) 

if item: 
conn.zadd('viewed:' 4 token, item, timestamp) 这 行 代 但 是 新 
conn.zremrangebyrank('viewed:' + token, 0, -26) 添加 的 ， 
сспп.хіпсгру ('уіемед:', item, -1) 


ОДООООО000000000000000000000000000000000000000000 
ОДД000090000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000 


ОДООО0000000000000000000000000000000000000000000 
ООД000000000000000000000002 10000000000000000000000 
О0000000000000021ҸТЕК5ТОАЕОО0000421МТЕА5ТОАЕПОО00000 
ОДООООД000000000000000000000000000000000000000000000 
00000000500000002-100000000000000020 Ос0000000000000 
ОДООО000000000000 


00002-10 ПО0000геѕса1е міемеа () 


删除 所 有 排名 在 20 000 4 


def rescale viewed(conn): 之 后 的 商品 。 


while not QUIT: 将 浏览 次 数 降 低 
conn.zremrangebvrank ('viewed:', 0, -20001) «— 为 原来 的 一 半 。 
conn.zinterstore('viewed:', ('viewed:': .5)) « 
time.sleep(300) < 5 分 钟 之 后 青 次 执行 


这 і ha 作 о 


ПОСОООООО0000000000000000000000000000000ғаке Web 
Retaileri 0О0О0О0ОО0О0ООО0ОООООООООООООооОовооооОооОоОо 
сап_сасће ()00000000000000000000000000000 2-1 1000 


00002-11 сап сасћһе() | 


= ТЕТ .. A - ~ 
尝试 从 页 面 里 面 检查 这 个 页 面 能 否 
中 商品 Ір. wl 22 p узу „ГЕ 
def can cache(conn, request) : Жан ий ID. 被 缓存 以 及 这 个 页 
item id = extract item iċ(request) کج‎ 面 是 否 为 商品 负面 。 

if not item id ог is dynamic (request): 

return False 
rank = conn.zrank('viewed:', item id) <-- 取得 商品 的 浏览 次 数 排名 с 
return rank is not None апа rank < 10000 根据 商品 的 浏览 次 数 排 


名 来 判断 是 人 需要 组 存 


м А 





О05000000000000ғаке Web Retaileri ОДООООО00000000000 
000000000010 ООооО0000000000000000000000000000000000 
О0000000000Аеаіѕ0000000Е9де Side ІпсіІидеѕ0000000000000 
ОО00000000000рге-орії ппіге ПОобОООО00000000000000000000 
уррвеаї  ДОДОДООООДО00000000000000000000 


ПродеРовм. сОМДПОДерувм.СОмМ 00000 
ОО0000000000 


2.6 ПП 


О05000000000ғаке Web ВекаїегГророОООМ/ЕБОООО0000000 
UUU000000000WebUUUUUUU0000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU000000Ucookie0000000000cookieUUUUUUUUUU0000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


D000000000000Redis0000000000000000000000Redis0000 
ОрОб00000000Веаї  оДООО00000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUD 


® [Fake Web RetailerUUUUUUUUUUUUUUUUUUUUUUUUU000D0 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


D000ePUBw.COMDUUUUePUBw.COM ПППП 
UUUUUUUUUUUUU 


OOOO 0000 


D00000000000000000Redis00000000000000000000000000 
О00000Аеаіѕ=00000000000000000000000Аеаіѕ= 00000000000 
00 


дорбеРювм. сОМІДДДерРувм. СОМ ПОД 
О000000000000 


[3] Redis] 


000000 


UUUUUUUUUUUUUUU 
UUUUUUUUUUU 

e ОДО0000000 

• 0000 


ороборордороа000200000Веаїв ороооооооовоооооооооо 
ОДОДОО00000000000000000000000000000000008еаї 00000 
ОДО0р00000000000000000000000000000000000000200 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
ОДООД000000000000100000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
ОДОДСЕТО5ЕТОДОВеаї  ПОДОО00000000 


000000000000 | О000000000Веаї  ророророродо0000000 
000000000000000000000000http://redis.io/commands. 


Redis 2.4ПВеаїз 2.6  ПППДАСБОДОДОДОДОДУМ пасма ПП 
DDURedis 2.4000000000000веліз 2.6000000000000Веліз 2.4 
URedis 2.6П000000000000000чабо00000110000000000000000 
ООРТТЕОДОРЕХРІВЕДДООРЕХРІВЕАТООООООДОО000000000 
ОВІТОРОДОВІ ТСООМТ00000000000веліз 2.6000000000000000 
DRPUSHULPUSHUSADDDSREMDUHDELDZADDUZREMDURedis 2.60000 


UUUUUUUUU 


DU000ePUBw.COMUNUUUePUBw.COM ПОД 
UUUUUUUUUUUUU 


3.1 ПОГ 


оробар002г2000000кеаї ро обоброророробороророробобо0 
О00000000000000С00С+ +00000000000000Аеаіѕ= 0000000000 
ООЗО00000 


° ППППруге 5їгїпОЦП 
° 000 
° 0000 


ОООО00000000000000000000000000000000іпсгеплепіб00 
UDDdecrement0QOQ0000000000Redis0000000000000000000000 
О0000опа іпеедегудО000000032000000000320000000064000 
О000006400000000000000000000001ЕЕЕ 754000000000 
Паошибјеппрркеа ор ООДО0О0000000000000000000000000000 
UURedisUUUUUUUUUUUUUUUUDUDD 


UUUURedisUUUUUUUU 一 一 UUUUUUUUUUUUUUUUUUUUUUUUUDUDUD 
UUbitUUUUUsubstringUUUUUUUUUUUUUUUUURedisUUU0UUUUUUUUD 
П000000 


03-10000Аеаіѕ0000000000000000 


03-1 Ведїз пДОО0Д00000 


INCR Кеу-пате----ПОДДО00001 
DECR Кеу-пате----ПОДОДОООЇ 


INCRBY INCRBY key-name атойпі----ПДОДООДООЛатоипі 
DECRBY DECRBY Кеу-пате атойпіє----ПОДЛДДОПОПатоип і 


INCRBYFLOAT Кеу-пате атошпі----ОППОДОДООО 
INCRBVFLOAT | 
amount(IO0OOHRedis 2.600000000 





Орр00000000Кеаї  дорОООДОДООО00000000іпеегргеєр 0000 
QOD0000000Redis00000000000000000000000DINCR*DDECR*0DO0 
UUU00000000000000000000000000000000URedisU000000000 
UUUUUU0000000000UUUUUUU000000UUUUUUUUUUU0000000UUUUUU 
Двеаї  дОООО00000000003-1000000000000000000000000 


00003-1 DO000000UURedisUINCRUUUDECRUDU 


>> conn = redis.Redis() 
>> conn.get('key') 


和 自 增 操作 一 样 , A >>> conn.incr('kev') 

行 自 减 操作 的 函数 1 

也 可 以 通过 可 选 的 >> сопп.іпсг('Кеу!, 15) 

Pa “了 Pr H. 16 

参数 来 指定 减 量 。 | >>> conn.decr('key', 5) 
|| AB 

在 尝试 获取 一 个 键 >> conn.get('kev') 

的 时 候 ， 命令 将 以 sta isib шы, 113! 

ДИН ТОНИ "ий 

存储 的 整数 。 >>> сопп.іпсг('Кеу!) 


14 








尝试 获取 一 个 不 存在 的 键 将 得 到 一 个 
None 值 ， 终端 不 会 显示 这 个 值 。 


我 们 既 可 以 对 不 存在 的 键 执行 自 增 操 
作 ， 也 可 以 通过 可 选 的 参数 来 指定 自 
增 操 作 的 增 量 。 





即使 在 设置 键 时 输入 的 值 为 
字符 串 ， 但 只 要 这 个 值 可 以 
被 解释 为 整数 ， 我 们 就 可 以 
把 它 当 作 整 数 来 处 理 。 


О000000000000000000000000 incr ( ) 00000 Python] 
Кеаіѕр0000013САВҮр0000іпсг( ) О0000000000000000000000 
О0000000000000000000000000010000000000РућопрКеаіѕ00 
UUUURedis 2.6000000000001псгюру?оа+ () 00000 
ІМСВВУРІСАТДОДООі псгру бТоаї ( ) 00000001іпсе ( ) 00000000 


00 


О0000000000000Аеаіѕ0000000000000000000000000000 
О00000000000000000000000000000900000000000000000000 
О0000раскоо000000000003-2000000000000000000000 


03-2 Кеа 00000000000 





APPEND Кеу-пате ма1 ие——ППма1иеП00000кеу - патедрроро 
0000 





СЕТВАМСЕ 
СЕТВАМСЕ Кеу-пате start епа——000000005 сагебООПепа 


ООО0000000000005 ta r tend] 


ee kev-name offset маие—— 05 Са гЕДО0О0О0О0О000О 
SETRANGE 
0000 








па СЕТВІТ Кеу-пате от5е+——00ОООООООООООРЕ 5егін 900000 
00000000 f set 0000000 

кенеле SETBIT kev-name offset маие——0000000000000000000О 
Прбо бР5еєрОДОДОДОПОмаїице 


еро Keven Tart en e ОЛ 
ООО000000005 ка г+0000епаоооооосооооооооооооооо0000 


BITOP operation dest-key Кеу-пате [Кеу-пате ...l 
ВІТОР --- ОДООО0000000000000АМОООДООБДрДОДОХОВОООДМОТОДОД000 
LLLDLLLLDbitwise орегаїіопДДДО0000000000Оадез'є - кеур00 




















GETRANGE/JSUBSTR  Веаї  ПОДСЕТВАМСЕДОООДОО 


5085 ТЕДПОДОДОДОООПРуЄВОПОООООДООООО8 мів Є г O) 00000000 
000000002.6п00000кеаїдр0000009е range ( ) 00000000 


ООО5ЕТВАМСЕДО5ЕТВІТОДООООООООООДОООО000000000000 
QD00000Redis0000000000nuyli00000000000000000000000000 
О000006ЕТКАМСЕПООООО00000000000000000000000006ЕТВІТ 
О0000000000000000000000000000000003-200000000000000 
0000 


00003-2  ООООД0000Кеаів ШИШИШИ 





APPEND 命令 在 Fi FFE ‘hello "追加 到 目前 并 不 存在 的 
执行 之 后 会 返 > "н ра ес ый ы 
ми 325 >>> cecnn.append( 'new-string-kev', 'hello ' < 
md o g Redis 的 索引 以 0 为 开始 ， 
的 长 度 。 >>> cenn.append('new-strirg-key', 'world!') 在 进行 范围 访问 时 ,范围 的 
зо ЗЫ “ың. (endpoint) 默认 也 包 
对 字符 申 执行 藻 >>> conr..substr('new-string-key!, 3, 7) < 含 在 这 个 范围 之 内 。 
787873 H lo мс! 4 і Жез 
围 设置 操作 。 > >>> conn.setrange( 'new-string-kev', 0, 'H') TAJĦ' lo wo "ПРЯМА 
‘hello world!' 的 中 间 。 
ПР ERTS MRE. | ”前 面 执行 的 两 个 
g aa >>> conn.setrange( 'new-string-kev', 6, 'W') SETRANGE 命令 成 功 
РОБ 12 HEIN: FI w 从 原 
回 字 符 串 的 当前 总 >>> conn.get('new-string-kev') 来 的 小 写 改 成 了 大 写 。 
КЖ. 'Eello Woridi' а 
> >>> conn.setrange ('new-string-key', 11, ', how are уоц?'!) 
SETRANGE 命令 既 可 | 25 前 面 执行 的 SETRANGE 命令 移 除 
以 用 于 替换 字符 中 里 >>> conn.get('new-string-kev') Y rH ВЕНУ 5, FEE 
已 有 的 内 容 ， 又 可 以 | ‘Fello World, how are you?' 了 一 多 字符 追加 到 了 字符 由 末尾 。 
用 于 增长 字符 串 >>> conn.setbit('another-kev', 2, 1) سج‎ 对 超出 字符 串 长 度 的 二 进 
о > 0 І ы» ы Р K. 
>>> conn.setbit('another-key', 7, 1) 制 位 进行 设置 时 ， 超出 的 
ыз ыза >>> conn.get('another-key') 在 对 Redis 存储 的 二 进 制 位 进 
回 二 进 制 位 被 设置 > f; 4 
之 前 的 值 Аз матаны ай 行 解释 (interpret) 时 ,请 记 住 
= ° 通过 将 第 2 个 二 进 制 位 以 及 第 7 个 二 进 制 Redis 存储 的 二 进 制 位 是 按照 
位 的 值 设置 为 1， 键 的 值 将 变 为 “! , E 


ха 信物 量 从 高 到 低 排列 的 。 
就 是 编码 为 33 的 字符 。 


ОДООООО0ОД000000000000000000000000000000000000000 
D0000000000000000000000000Redis0Q0000000000000000000 
UUUURedisUUUUUUUUUUUUUUUUUUUUUUU000URedisUUUUUUUUUDUD 
UUUUUU000000000UUUUUUUWATCHOUUMULTIUUUEXECUUUUUU 
3.7.2)000ЗОД0000000000004000000000000000000000000000 
ООД000000000090000000000000000000000000000000000000 
0000 


ОДООО0О000000000000000000000000000000000000000000 
D0000000000000000Redis000000000000000000 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
LLILILLILLLILLILU 


3.2 || 


Ора0000000Веаї  ДобООО000000000000000000000000000 
ОДОООО00000000000000000000000000000000000000000 


ОДООД00000000000000000000000000000000000000000000 
О00000000000000000000003-З00000000000000000 


03-3 ДОДО00000 


«то 

















LPOP Кеу- пате----ПОДОО00000000 
LINDEX Кеу-пате offset 一 一 00UU0UU00UUoffsetDDD 


pange | RANGE kev-name start end 一 一 0DD00DstartDDDDendDDDDDDD 
ППППППППППП5ХагПППППепаПППППППППППППППП 











LTRIM Кеу-пате start епа——0000000000005 ta гЕр00ђепац 


ОДОО000000000005 ta геддОДепа 0000000 








ОДО000100000000000000000000000000000000000000000 
ООД000000000003-300000000000 


00003-3 


在 向 列表 推 人 元 -| 
素 时 ， 推 人 操作 
执行 完毕 之 后 会 
返回 列表 当前 的 
长 度 。 


UUU000000URedisU00000000000 


>>> conn.rpush('list-key', 'last') 

1L 

>>> conn.lpush('list-kev', 'first') 

2L 

>>> oconn.rpush('list-kev', 'new last') 
3L 


>>> conn.lrange('list-kev', 0, -1) 
('first', "Last", "new last'l 

>>> Conn. 
itirati 
>>> conn.lpop('list-kev') 

Славне 

>>> conn.lrange('list-kev', 0, -1) 
Г'пем last'] 


lpop('list-kev') 


>>> conn.rpush('list-kev', 'a', 'b', ' 
аһ 

>>> conn.lrange('list-kev', 0, -1) 
['пем last', 'a', 'b' cr] 


>>> conn.ltrim('list-kev', 2, -1) 
True 

>>> сопо.Іікапое('11892-Ккеу', 0, -1) 
ІЗ, өз 


可 以 很 容易 地 对 列表 的 
< 两 端 执行 推 人 操作 。 


从 语义 上 来 说 ， 列 表 的 左 端 
| 为 开头 ， 右 端 为 结尾 。 


通过 重复 地 弹出 列表 左 端的 元 素 ， 
可 以 按照 从 左 到 右 的 顺序 来 获取 列 
表 中 的 元 素 。 


可 以 同时 推 入 多 个 
元 素 。 





可 以 从 列表 的 左 端 、 右 端 或 者 
左右 两 端 删 减 任意 数量 的 元 素 。 





UUUUUUUUUUUULTRIMUUUUUUU LTRIM 0 LRANGE 000000000 
00000 LPOP П RPOP QO000000000000000000000000000000%0 
О0000000000000Аеаіѕ= 0000000040000 


О0000000000000000000000000000006іоскО00000000000 
О00000000000000000000210000000003-400000000000000000 
00 


03-4 ОДОДОДОО0000000000000000 





BLPOP Кеу-пате [key-name ...] timeout 一 一 0U0U00000 
ООООД000000000016 і тео 0000000000000000 








BRPOP Кеу-пате [Кеу-пате ...] timeout——[0000000 
ОДООО000000000016 і тео 0000000000000000 














ЧИТ RPOPLPUSH source-kev Яеѕї - кеу——Пѕоигсе - кеуб0000 
О000000000000000009еѕ - кеурооо00000000000000 


BRPOPLPUSH source-kev dest-key timeout——ij 

source - кеу ДОДО0000000000000000009ае5' - кеудО000000 
BRPOPLPUSH 

ОДО000000000050и rce - кеуОДОД001 і теои'єООДОДОД0000000 

00 














ОО6О0000000000000000000003-Ф0000000ВЕРОРІРУ5НОГО 
ОООО0000008ЕРОРООДООООДОО00000 


00003-4 ПППППППППЕ ев! ДрООООО0000000000 


>>> conn.rpush('list', 'itemi') 
== 1 эе 
将 一 个 元 素 从 一 个 >>> conn.rpush('list', 'ібет2') 将 - - 些 元 素 添 加 到 两 
列表 移动 到 另 一 个 2 个 列表 里 面 。 
列表 ， 并 返回 被 >> conn.rpush('list2', 'item3') 
>> conn.brpoplpush('list2', 'list', 1) 
"ісепз! 
мижа > >>> conn.brpoplpush('list2', 'list', 1) 弹出 “list2” 最 右 端 的 元 素 ， 
MEAN, EM >» conn.lrange('list', 0, -1) | 并 将 被 弹出 的 元 素 推 人 
у bad. Ба ['item3', 'iteml', 'item2'] “list” ЕТ 
出 操作 会 在 给 定 >> conn.brpoplpush('list', 'list2', 1) је Руј 
的 时 限 内 等 待 可 'item2' 
弹出 的 元 素 出 现 ， >> conn.bipop(l'list', 'list2'l, 1) 

并 在 时 限 到 达 后 | — ('iist', litema') BLPOP 命令 会 从 左 到 右 
返回 None (交互 у а виа 地 检查 传人 的 列表 ,并 对 
куё Ad 'list', 'itemi' ү акад =Ë 
终端 不 会 打印 这 >> conn.blpop(['list', 'list2'], 1) 最 先 遇 到 的 非 空 列表 执 
ЖЕ). ('list2', 'item2') 行 弹出 操作 。 
>> conn.bipop(l'list', 'list2'l, 1) 











ОООО00000000000000000000000000тпез5аді 9 00000 
[task ачемерПООД006000000000000 


ОДО00000000000 


02.1002.5000000000000000000000000000000000000 
ОДООДО0000000000000000000000000000000000000000000 
ОДООДО0000000000000000000000000000000000000000000 
ОДООДО0Д0000000000000000000000000000000 


update token( ) ПП00000000000000000000000000000000 
000000006.1.10000000 


UU000000000000000000000000000000000000UUUURedisD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUU 


D000ePUBw.COMUNUUUePUBw.COM (00000 
UUUUUUUUUUDUU 


3.3 ПД 


Кеа ППОДОДОД00000000000000000000000000000000000 
ООООО0ОО0000000000000010000000000000000000000000000 
ОДООДОО00000000000000000000 


ОДООООО0000000000000000000000000000000000000000 
ООДОО0ОО00000000000000000000000000000000000000000700 
О000000 


03-500000000000000000 


03-5 000000000 





SADD Кеу-пате item [item ...]——00000000000000 
О000000000000000000000000000 








SREM Кеу-пате item [item ...]——000000000000000 
ОрО000000000 


SISMEMBER Кеу-пате і+ет——ПО00і+ето000000кКеу - 
SISMEMBER 
name [| 











SCARD Кеу-пате----ПДОДОДОДО000 


SMEMBERS key -name—— 00000000000 














SRANDMEMBER kev-name [сопитЕ]——0000000000000000 
SRANDMEMBER | О00сооп+ПОО00000000000000000соип+000000000000000 
000000 


SPOP Кеу- пате----ОДО00000000000000000000 


SMOVE source-kev dest-kev іїет----ПППП5оигсе-Кеу 
SMOVE 00001 єетдодО0Овом гсе - кеуДО0001 єетО0002 єет)0000 
деѕї - кеу 0001 єет000000000002000000 


О03-5000000000000200000000003-50000000000000 

















00003-5 ПППППППППЕ ев ШИШИП 


SADD 命令 会 将 
那些 目前 并 不 >>> conn. 
存在 于 集合 里 站 З 

面 的 元 素 添 加 >>> CONI, 
ява True 


>>> СОПП. 
返回 被 添加 元 False 
素 的 数量 。 >>> CONN. 
2 
>>> conn. 
поні set((l'a', 
的 所 有 元 素 。 >>> conn. 
True 


>>> conn. 
False 

>>> conn. 
set (['а'] 


srem 函数 在 元 素 被 成 功 移 除 


sadd('set-key', 'a', 'b', 'e') 时 返回 True, 移 除 失败 时 返回 
False; 注意 这 是 Python 客户 


srem{'set-key', 'с', 'а') 端的 一 个 bug, 实际 上 Redis 的 
SREM 命令 返回 的 是 被 移 除 元 


srem('set-kev', "et, 'd') Я 
素 的 数量 ， 而 不 是 布尔 值 。 
5 d('set-key' а 
зані + | 查看 集合 包含 的 元 素数 最 。 
smembers('set-kev') 
'b'J) 可 以 很 容易 地 将 元 素 从 一 
smovef 'set-ker', 'set-kevż', та" 个 储 合 移动 到 另 一 个 集合 。 


在 执行 SMOVE 命令 时 , 如果 
用 户 想 要 移动 的 元 素 不 存在 
于 第 一 个 集合 里 ， 那 么 移动 
操作 就 不 会 执行 。 


smembers('set-kev2') 
) 


smove ('set-kev', 'set-kevz', 'с') x 


ОДОДОД0000000000000000000000000000000020000000000 
ООО00000000000000000000000000000000000000003-600000 


0000 


03-6 ДД0000000000Веаїз00 








‚ЕЕ SDIFF Кеу-пате [key-name ...]——000000000000000 
О00000000000000000000 


SDIFFSTORE dest-kev Кеу-пате [Кеу-пате ...1----П 
SDIFFSTORE 
ОО000000000000000000000000000000000009еѕ+ - КеуППП 





SINTER Кеу-пате [Кеу-пате .. . 1—— 0000000000000 
SINTER 
0000000000000 





SINTERSTORE dest-kev Кеу-пате [Кеу-пате ...1---- 
SINTERSTORE 
О0000000000000000000000000009еѕ - кеу)00 











SÜNTON SUNION key-name [key-name ...]——100000000000000 
0000000000000 
SUNIONSTORE dest-kev Кеу-пате [Кеу-пате ...]—— 
SUNIONSTORE 
ОО0000000000000000000000000004еѕ+ - кеу000 


О000000000000000000000300000000*0000”000*0000”0 
О000003-60000000000000 








00003-6 ОООО00000Кеаіз ДобОДОДОДООД0000 


NAT ж А >>> conn.sadd('skevi', 'a', 'b', 'c', 'а!) 
зувати и 首先 将 一 些 元 素 汪 
二 个 集合 包含 的 ш coni. зада ('зкеу2', 'с!, 'd', 'e', 'f') 加 到 两 个 集合 里 面 。 
所 有 元 素 的 结果 。 >>> conn.sdiff('skevi', 'єКеу2!) 
_ set(['a', 'Ь'1) 
>>> conn.sinter('skevi', 'skey2') 
sêt Pe", 3931) ja 计算 出 同时 存在 于 两 个 
>>> conn.sunion('skevi', 'skevz') 集合 里 面 的 所 有 元 素 。 
века [Sa x х. By taħ. ЗОРА ЖЕТТ) 


计算 出 两 个 集合 包含 的 所 有 各 不 相同 的 元 素 。 


ОРуєћоп0000Аеаіѕ$ППООО0000000000000000000000000 
UUUUUUUUU 


О00000006еаі$ПОО00000000000000000000000000000000 
ОДОО0000000000 


ПродеРовм. СОМІПОДерувм.СОмМ ДОООП 
ОО0000000000 


3.4 || 


Д200000Веадї  ророророророророророовеаї ор рор000000 
Кеа ППОДОДОДОО0О0000000000000000000000000000000000 
ОДООООО0000000000000000000000000 


ОДООД0О000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОД00003-700000000000000 


03-7 О00000000000000 


В 00000 
НМСЕТ Кеу-пате key [key .. . 1—--ОО0000000000000 


- є. 1— 0000000000 








HDEL Кеу-пате key [key ...1——00000000000000000000000 
00000000 











HLEN key - пате———П00000000000 


0U03-7U0U000000UHDELUUUUUUIUUUUUUUUHLENUUUUUUUUUUOD 
ОДДОО0НМСЄТОНМ5ЕТОДОООДООДОНМСЕТОНМ5ЕТОООДОДОО000000 
UUU000000000000000000000000000RedisU0000000000URedis 


О000000003-/0000000000000 


00003-7  ДООО00000Кеаіє ШИШИП 


使 用 HMSET y жш conn.hmset ('ћагћ-Ккеу', f'ki': 
rue 

A у) yey 

е аан >>> conn.hmget('hash-kev', ['К2', ' 

2 Ї 2: % 4% [ta t. 157311 

THAT) E ІҢ. >>> conn.hlen( 'hash-kev') 


3 


>> conn.hdel('hash-kev', 'ki', 'ka' 


True 
HDEL 命令 在 成 功 地 移 除 了 至 少 一 个 键 值 对 时 返 
БІ True， 因 为 HDEL 命令 已 经 可 以 同时 删除 多 个 
键 值 对 了 ， 所 以 Redis 没有 实现 HMDEL 命令 。 


міз, Skati v2, av3 1) 
使 用 HMGET 命令 可 以 一 
| 次 获取 多 个 键 的 值 。 


H HLEN 命令 通常 用 于 调试 一 个 
包含 非常 多 键 值 对 的 散 列 。 


О10000НбЕ ТОООНЕ ТОООООНМБЕ ТОООНМЉ Е Т0ОООООО0ОО00О 
ОДООООО0000000000000000000000000000000000000000 


03-8 ПООД0О00000000000000000000000000000 


03-8 П0Кеаіѕ 0000000 








а Кеу-пате key—— 000000000000 
es HKEYS Кеу- пате——0000000000 


HVALS key - пате----ПДПДД00000 
HGETALL Кеу-пате----ПОДОО00000000 





HINCRBY Кеу-пате key іпсгетепі-(ППКеуПйі ІШІ 





іпсгетепі 


НІМСЕВҮҒІ ОАТ Кеу-пате key іпсгетепі----ПДКеуППД 
ДОДОДОіпсгетепі 


HINCRBYFLOAT 





[ILIIHGETALLIIIIIHKEYSIIHVALSIII III IILI IILI 
UUUUUUHKEY20UUUUUUUUUUU0U000UUHNCETUUUUU000UUUUUUUUUUUD 
UUUUUUUUUUUUUUUUUU 


НІМСЕВҮГНІМСЕВҮҒІ ОАТПППППППППППППППППІМСЕВҮП 
ІМСАВҮРЕОАТОПО00000000000000000091МСАВҮр 
НІМСКВҮРГОАТОО00000000000000003-80000000000000 


00003-8 ПППППППППЕ ев! ИШИП 


>>> conn.hmset ('hash-key2', f'short':'hello', 'long':1000*'1')) 
True 


>>> conn.hkeys('hash-key2') 在 考察 散 列 的 时 候 ， 我 们 可 以 只 取出 散 列 

[ 'short'l 包含 的 键 ， 避 免 传输 体积 较 大 的 值 。 

rn 'num') 检查 给 定 的 键 是 否 存在 

>>> conn.hinerby ('hash-key2', 'num') ТР 

11 у 

>>> conn.hexists('hash-key2', 'num') МІРА ТЕ, 对 散 列 中 一 个 尚未 存在 的 

True 键 执行 自 增 操作 时 ，Redis 会 将 键 的 值 当 
作 0 来 处 理 。 


ОО000000000000000000000000000000000000000008КЕҮЅ 
ОДООООД000000000000000000000000000000000000000 
5 15МЕМВЕВДООДОООДООООООДООДОООНЕХІ5 ТЗООООО0000000000 
ОО011000000000000061МСАВҮПО0000000000 


ОбОбОб000000000000000000000000000000 
[| lePUBw.COMII | [le PUBWw. COM (0000 
ЕНЕНЕШЕЕЕЕШЕ 


3.5 ПО 


ОДОД0000000000000000000000000000000000000009000 
ОО00000000000000беєсо)р0005сап0000000000000002000000 
ПОО0000000000000000000000000000000020000000000 
соокіе 00000 


ОДООО0000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДО300050006000700000000000 


03-9ПО00000000000000 


03-9 ОДОД0000000 





ZADD kev-name score member [score member ...1——000 


П000000000000000 





ZREM Кеу-пате member [member ...1----ОДО0000000000000 
ОД000000000 


ZCARD key - пате----ОД00000000000 











ZINCRBY 
ZINCRBY key-name increment тетбег——тетре г000000 


increment 


ZCOUNT key-name min тах——ПО0000тіпдтахо000000 





ZRANK Кеу-пате тетрег——0П0тетре гО00000000 
ZSCORE key-name membe r——[000membe r000 


ZRANGE key-name start stop [WITHSCORES ] —— 000000000 
ZRANGE |00start0stopp0000000000000WI ТН5СОкКЕе5ДОО0О0000000000000 
000 


ОДД000000000000000000100020000000000000000000000 
00003-900000000000 











00003-9 ООООД0000К ев ДбОО000000000 


ТЕ Python 客户 端 执行 
ZADD 命令 需要 先 输 
人 成 员 、 后 输入 分 值 ， 
ЗХ Redis 标准 的 先 
输入 分 值 、 后 输入 成 
员 的 做 法 正好 相反 。 


获取 指定 成 员 的 排名 
(排名 以 0 为 开始 ) ， 
之 后 可 以 根据 这 个 排 
名 来 决定 ZRANGE 的 
访问 范围 。 


从 有 序 集合 平面 移 | 


除 成 员 和 添加 成 员 
一 样 容易 。 





>>> cConn.zadd('zset-kev', "at, 3, 'b', 2, 'e', 1) 


>>> conn.zcard('zset-kev') 取得 有 序 集合 的 大 小 可 以 让 我 们 在 某 些 情 


3 况 下 知道 是 否 需要 对 有 序 集合 进行 修剪。 
>>> conn.zincrbv('zset-kev', “с”, 3) | 
ече Й и Р ЕЕЕ! РЕ, 有 序 集合 
К да йы. | | 的 成 员 也 可 以 执行 自 增 操作 。 
ass conn.zrank('zset-kev', 'с!) 获取 单个 成 员 的 分 值 对 于 实现 
2 ` ~ Л Й 
>>> coml.zcount('zset-kev', 0, 3) 计数 器 或 者 排行 榜 之 类 的 功能 
21, 非常 有 用 。 

对 于 某 些 任务 来 说 ， 统 计 给 定 分 

值 范围 内 的 元 素数 量 非常 有 用。 
>>> conn.zrem('zset-kev', 'b') 
True 
>>> conn.zrange('zset-kev', 0, -1, withscores-True) 
(рата 3.0), (тес, 4,021 — 


在 进行 调试 时 ， 我 们 通常 会 使 用 ZRANGE 取出 有 序 集合 包含 的 所 有 
元 素 ， 但 是 在 实际 用 例 中 ， 通 常 一 次 只 会 取出 一 小 部 分 元 素 。 


О07АРОП2АЕМЦ2ІМСАВҮП75 СОВЕПУВАМСЕСО ДОЛІ 00020000 
ПОООО00000000000002с00мТ000000000000000000000000000 


000000 


03-100000000000000000000 


03-10 ПООДОДОООД0ОО00000000000000000000000 


ZREVRANK Кеу-пате member 一 一 00U0000000member 
ZREVRANK 
0000000000000000 








ZREVRANGE Кеу-пате start stop IWITHSCORESI 
ZREVRANGE 
--З-ОО0000000000000000000000000000 


ZRANGEBYSCORE 


ZREVRANGEBVSCORE 


ZREMRANGEBVRANK 


ZREMRANGEBVSCORE 


ZINTERSTORE 


ZUNIONSTORE 


ZRANGEBVSCORE key min max [WITHSCORES9 ] 
[LIMIT offset соипі1----ПОДДЗОДОДОДОДті птах 
000000 





ZREVRANGEBVSCORE key max min [WITHSCORES] 
[LIMIT offset соипі1----ПОДОЗОДОДООД0ОтіпОотахо0 
ОО000000000000000000000 








ZREMRANGEBVRANK Кеу- пате start stop——0000 
0000005 ta 5 сор) 000000 





ZREMRANGEBVSCORE Кеу-пате min пах--(ПІШІП 
Ор000ті птах 000000 





ZINTERSTORE dest-kev kev-count key [key 
...І [WEIGHTS weight [weight ...1Ї 
[AGGREGATE SUM|MIN|MAX] ----ПООООД0000000000 
0000 





ZUNIONSTORE dest-kev key-count key [key 
...І [WEIGHTS weight [weight ...]] 
[AGGREGATE SUM | MIN | MAX] ----ПООООДО0000000000 
0000 








Д03-10000000000000000000000000000000000000000 
2КЕМҒПОООО000000000000000000000000000000000000000 
00000003-10000/І1МТЕВЗ ТОВЕПСОМІОМУТОВЕНОГО 


00003-10 ПО00000ОО2ІМТЕКЅТОКЕЦ020МІОМЅТОКЕ 00 








首先 创建 两 个 有 序 集 合 。 
>>> 1 
м ZINTERSTORE fil ZUNIONSTORE 
>>> Сопп.задда('явес-2', BE 4, "є", 1, d'p 0) 默认 使 用 的 聚合 函数 为 sum, 这 个 
3 Жс ТН FAR A HS ЛУЈА НУ 
>>> conn.zinterstore('zset-i', (l'zset-1', 'zset-2')) 分 值 都 加 起 米 。 
2L 
>>> conn.zrange('zset-i', 0, -1, withscores-True) 
(f'e', 4.0), ('b', 6.0)1) 
>>> conn.zunionstore('zset-u', (l'zset-1', 'zset-2'), aġgregates'min') 
4L 
>>> conn.zrange('zset-u', 0, -1, withscores=True) қ > 
H 

КЕ), 20,09, бао 1.0). ВИ, 12.00, Б, 204 用 户 可 以 在 执行 并 
>> conn.sadd('set-1', 'а', 'а') | 集运 算 和 交集 运算 

的 时 候 传人 不 同 的 
>> conn.zunionstore('zset-u2', ['zset-1', 'zset-2', 'set-1')) L жор, HE 
i h sum, min, max — 
>>> conn.zrange('zset-u2', 0, -1, withscores-True 73 — 

[=] 

[irar 220), t'a'; 4207, (“ет 409; T'b'; 60y] | 个 聚合 丽 数 可 选 。 





用 户 还 可 以 把 集合 作为 输入 传 给 ZINTERSTORE 和 ZUNIONSTORE, 
命令 会 将 集合 看 作 是 成 员 分 值 全 为 1 的 有 序 集合 来 处 理 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUU0003-1000UUUUUUU0000000000UUUUUUUU0000UUUUUUUUU 
UUUUUUUUUsumUUUUUUUUUUUUUUUUUUUUUUUUUU 




















03-1 [|[jconn.zinterstore('zset-i', ['zset-1', '25е1-2' ])0000000025е - 
1]25еї - 200000000025е: - 100 


ОДООД0000000000000000000000000000000000000000000 
оррбророз-грор00000пті пООО0000000пті пОДОДООДООО000000 
ОДООООО00000000000000000000000000000 





ж- zset-u zset 5 


























4:0 
— а ka 
| mol 
| b'2 
“ і 
03-2 (Qconn.zunionstore('zset-u', ['zset-1', 'zset-2'], 


аддгедаїе= ' тіп ' ) 000025$еї- 100х5е+ї - 20000000тіп0000055еї - 00 





П01 ДОДОДОДО"ООДбОДОСУМІОМУ ТОВЕПОДСІМТЕВЗ ТОВЕЛОГО 
О"ПОДОО0ОО000000000000000000000000000000000000000000 
ОДО00343000000079М10М5 ТОКЕДООДООООООООООДООО00000000 








zset-1 zset zset-2 





zset set-1 set zset-U2 — zset 一 


























03-3 [[jconn.zunionstore('zset-u2', ['zset-1', 'zset-2', '5е1-1'])0П0 
DO0U00zset-10zset-200set-1I0000000000zset-u2D00 


07000021МТЕА5ТОКЕП20МІОМ5ТОКЕПОООООО000000000000 
ПО0000МЕІЄНТрОООО00О0О000000000000000000000000000000 
П0000 


ООДОД000000000000000000/0рчбії5 п/сибестії ер 000 
pub/subr ILDRedis ПОДООООДОДОООД0О00000000 


ПродеРовм. сом ППеРовм.сом ДОООП 
ОО0000000000 


3.6 ППО 


ОДООО0000000000000000000000000000000000----00000 
О00000000000000000000000000рчю/ѕиеВ000000001іѕепег00 
о00000сһаппеІ000000рчо!іѕһего00000000000000000іпагу 
string плеѕѕадерОООО000000000000000000000000000000000 
ОДООООД00000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
UU0000000000000000000000000000RedisUU00000000 


03-11I0UURedisU002>000000000 


03-11 Кеаїв ПОДО00000 


SUBSCRIBE SUBSCRIBE channel [channel ...1----ОД0000000000 





UNSUBSCRIBE [channel [channel ...11----П0000000 
ОО0000000000000000000000000 


як [шз channel message 一 一 00000000D0 


UNSUBSCRIBE 








PSUBSCRIBE pattern [pattern ...]——00000000000 
0000 


PSUBSCRIBE 


PUNSUBSCRIBE [pattern [pattern ...11----ОДО0ОП 
PUNSUBSCRIBE 
О00000000000000000000000 








DDDPUBLISHODDSUBSCRIBENODPYthongOO00000000000000 
000000000000000003- 1: 1000000000ће!рег thread ПП 
РОВ! 15НППП 


00003-11 DOo0U00000U000URedisUUPUBLISHUDUDD 
SUBSCRIBE] 


>>> def publisherin): 
tine. sleep(1) 


函数 在 刚 开始 执行 时 会 先 休 虐 ， 让 订阅 者 
有 是 够 的 时 间 来 连接 服务 器 并 监听 消息 。 


она з for i іп xrange(n): 
启动 发 送 者 әдет س‎ ee ( channel', 1) ЗЕЛАНДУ ЈЕ НИ ТАРИ НК, ll 
Ял, ӘНЕ... time.slesp(1) | 消息 可 以 一 条 接 一 条 地 出 现 。 
它 发 送 王 条 ... 
消 息 。 >>> def run pubsub(): 创建 发 布 与 订阅 
р йс threading. Thread (carget-publisher, aS met |Ж, 并 让 它 订 
із pubsub = conn.pubsub() AE HUE. 
ша pubsub.subseribe((l'chanmel')) 
Ar count — 0 
iB БОЈА РА Қана for item іп pubsub.listen(): - 打印 接收 到 的 每 条 消息 。 
数 pubsub. РР print item < 
listenQiġ | “~ wakas a 在 接收 到 一 条 订阅 反馈 消息 和 二 条 发布 者 发 送 的 
执行 结果 来 шкі pubsub.unsubscribe () 消息 之 后 ， 执 行 退 订 操作 ， 停 止 监听 新 消息 。 
监听 订阅 消息 。 “+ оде Ban 客户 端 在 接收 到 退 订 反馈 消息 之 后 就 
ете rea 





不 再 接收 消息 。 


> >>> run pubsubi) 
p {'pattern': None, 'type': 'subseribe', 'сһаппе1': 'channel', 'data': IL) а 





实际 运行 函数 并 观察 它 在 刚 开 始 订阅 一 个 频道 的 时 候 ， 客 户 端 会 
们 的 行为 。 | ЭНИ] -条 关于 被 订阅 频道 的 反馈 消息 。 
('pattern': None, 'tvpe': 'message', 'channel': 'channel', 'data': '0') 
('pattern': None, 'tvpe': 'message', 'channel': 'channel', 'data': '1'} 
('pattern': None, 'tvpe': 'message', 'channel': 'channel', 'data': '2') 
('pattern': None, 'tvpe': 'unsubseribe', 'сћапле1': 'сћалле1', 'data': 
05) 
在 退 订 频道 时 , # За] ЖМ 这 些 结构 就 是 我 们 在 遍历 pubsub. 
馈 消 息 , 告知 被 退 订 的 是 哪个 频道 ， 以 listen () 函数 时 得 到 的 元 素 。 


及 客户 端 日 前 仍 在 订阅 的 频道 数量 - 


урвеаї  ПООО0000000000000000008.50000000000000000 
000000 


UUU00URedisUUUUUUUUUUUUURedisUUUUUUUUUUUUUUUUDUDD 
UUU0000000000000000000000000000RedisU00000000000000 
UUU00URedisUUUUUUUUUUUUUUUUUUURedisUUUUUUUUUUUUUUUDUD 
О000000000Аеаіѕ00000000000000000000с11еп+ -output - 


buffer-limit риоѕиоПО000000000000080000000000000 
OOO 


ОДООО0000000000000000000000000000000000000000000 
ОООО000000000000000000000000000РУСпопДДОКеаїБОДООООО 
О000000000000000000000соппесіїоп рооі000000040000000 
ОДООООО000000000000000000000000000000000000000000000 
Дрорбророророрвеаї  ООПРУВІ 1580005085СВІВЕПОДОДООООО 


ООО0О0000000060000000000000000000000000000000000 
О000000000000Аеаіѕ=П00000000000000000000000Аеаіѕ= 0000 
ILU 


ОДОДОДО0ОПРОВІ 15Н0005985 СВІ ВЕПООООДОДОДО00000000 
D00000000000000RedisD00000000000008.500000000000000 
client-output-buffer-limit риб Бод 


ОДООООО00000000000000000000000000000000000000000 
Дрорр000кеаї ДО 05000000000000000000 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


3.7 ULL 


оробррбб0000Веаїь )00500000Веадї  ПООООО0000000000000 
ПО00000000000000000000000000000000000000508Т0000000 
ПО00000000000М0ЕТІПООЕХЕСПООООО00000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


ОДОООО000000000000000000000000 
3.7.1 ПП 


Кеа ППОДОООО00000000000000000000000000000000000 
ООО00000000508 ТОООООООО0О00О00000000000500000000000 
ООО00000000000000000000000000000000000000508 700000 
5ОШПППогаег 5у00003-1200050А 000000 


03-12 5ОЕТПТТІПП 


SORT source-key [BY pattern] [LIMIT offset count] [GET 


SORT | pattern [GET pattern ...]] [ASC|DESC] [ALPHA] [STORE 
dest - key ] —— ОДОО000000000000000000000000000000000000 








ОД50АТОООООО00000000000000000000000000000000000 
ОООО000000000000000000000000000000 112070712'00000000 
011901200000000000000000000000000000000000000000000 
ОДОО00000000000000 


00003-120000050АТО0ДО00000000000000000000000000000 
ПО00000000000000000000000000000508ТО000000000000000 
ОДООООО00000000000000000000 


00003-12 ДОБОООООД508Т0000000000 


>>> conn.rpush('sort-input', 23, 15, 110, 7) 首先 将 一 些 元 素 添 加 

4 到 列表 里 面 。 

>>> conn.sort('sort-input') 根据 数字 大 小 对 

['7', '15', '23', '110'] 元 素 进行 排序 。 

>>> conn.sort('sort-input', alpha=True) TH ВЕЛИ АРХ л; 
['110', '15', "23", жуз] 素 进 行 排序 。 

>>> conn.hset('d-7', 'field', 5) 

11, 

>> conn,hset ('d-15', 'field', 1) п AG us 

1L 添加 一 些 用 于 执行 排序 操 

>> conn.hset ('d-23', 'field', 9) 作 和 获取 操作 的 附加 数据 。 

LE 

ss conn.hset('d-110', 'field', 3) 将 散 列 的 域 (field ) 用 作 
11. ЖЕ, XÎ sort-input 
>>> conn.sort('sort-input', bv-'d-ċx-sfield') ЕЙ 
ыт қол 列表 进行 排序 。 


>> conn.sort('sort-input', by='d-*->field', get-'d-x-sfield') 
t 1 t] 


Гая. 3 5 
获取 外 部 数据 ， ETA 
返回 值 ， 而 不 是 返回 被 排序 的 数据 。 


ЅОАТОООО0000000000000000000000000000000000000000 
03-1200000000аїрһарооо00000000000000000000000000000 


О00000000000000000007000000000000000508Т00000000000 
П0000000000050АТО00000000000000000000508Т0000000000 


00506ТПКеаіѕППОО00000003ЗВ0000000000000000Аеаіѕ= 0000 
ОДОООО0000000000000000000000000 


3.7.2 піидвеаїз ] 


ОДОДО00000000000000кеаї дрр000000Кеаї  Д0Д00000000 
ООДОДОО000000000000000000000000000000000000 
ZUNIONS ТОКЕПДООООООСОДОО0О0ОС00000000000000000000000 
двеаї  ПБОД000000000000іпееггиріїопПООООООДОДО000000000 
WATCHOMULT IQEXEC(JUNWATCHODISCARDI 


D000000000 Redis ООДОДО00000 MULTI 000 EXEC 0000000 
ОООООМА ТСНОМО ТІПЕХЕСУММА ТТ СНОООООООО000000000004..4 
ОО0000000000000М0СТІПЕХЕСПООО0ОМАТСНООММАТСНО 


П00Аеаіѕ 0000 


КВеаіѕ$0000006аѕіс transaction ППОДОМОЇ ТТОООЕХЕСОООООО 
ООО000000000000000000000000000000000000000000000000 
Огооаскдррордоровеаї б ПОДОМИ ТТ ООДЕХЕСООДОДООДОООО000000 
О00000000000000000000000000000Аеаіѕ о оор000000000 


UURedisUUUUUUUUUUUUUUUMULTIDUUUU00000000000000000 
UUU00UUUUEXECOUUURedisUUUUUUUUUUUMULTIUUUURedisUUUUUDU 
UUU000U000000000000000000000000EXECOO0U000URedisUU00DD0 
UUU00000000000000000000000000000URedisUUUPythonDUUDUU 
ПП/ПІрірейпеП( ор000000П0Оріер Line 0) П000000000000000 
ОО00000000000М0ЕТІПЕХЕСПОО00000000000000000Аеаіѕ=000 
О005000000000000000000000РуёпопОАеаіѕВО0000000000000 
D00000000000000000000000Redis0 


О00РОВЕІЅНОП050В5САІВЕППООО000000000000000000000 
О00000000000000003-1300000000000000000000рагаеІ0000 
П0000 


00003-13 ДООООООО0000000000000 


等 待 100 >>> def notrans(): | #'по©капа:'+НЖИНМТА 
毫秒 що print conn.incr('notrans:') 4 增 操作 并 打印 操作 的 执行 结果 。 
P => time.sleep(.1) 
conn.incr('notrans:', -1) سي‎ 对 inotrans: “计数 
— a, 器 执行 自 减 操作 。 
for і іп xranqe(3): 
启动 3 个 线程 来 执 w threading.Thread (target=notrans) .start () 
行 没 有 被 事务 包 ET time.sleep{.5) 等 待 500 毫秒 ,让 
ЖИН, 休眠 和 操作 有 足够 的 时 
自 减 操 作 。 2 间 完 成 。 





因为 没有 使 用 事务 ， 所 以 3 个 线程 
执行 的 各 个 命令 将 互相 交错 ， 使 得 
计数 需 的 值 持续 地 增 大 。 


3 


О0000000000300000000000000000по+ rans : 00000000000 
ОДО00000000100000000000000000000000000000000000000 


ООО00000000000000000000000000000000000003-140000000 
ОДО00000000 


UUUU3-14 0000000000000000 


创建 一 个 事务 型 





把 针对 'trans: 计数 器 
f transactional ) 流 >>> def trans Су 的 自 增 操作 放 和 人 队列 。 
水 线 对 象 。 pipeline = conn.pipeline() 
š pipeline.inecr('trans:') < 


| 等 待 100 ms。 
time.sleep(.1) a 


把 针对 'trans:' 计 о заоч | 2. 
数 器 的 自 减 操作 放 | СЫ pipeline .incr ('trans:', -1) 


print pipeline.execute () [0] 


入 队列 。 mel 启动 3 ЕЛ И ВУ БОЈЕ ТЈ 
jaf ti HF ВІЗ HM wan for i іп xrange(3): 自 增 、 休 眠 和 自 减 3 个 操作 。 
令 , 并 打印 自 增 操 作 的 Ууу, threading. Thread (target-trans) .start () йы 
执行 结果 3 АНА time.sleep(.5) 4— 
ТА Ж о N 等 待 500 ms, 
~ 让 操作 有 足够 
1 因为 每 组 自 增 、 休 眠 和 自 减 操作 都 在 事务 ”| 的 时 间 5 成 。 
里 面 执行 ， 所 以 命令 之 间 不 会 互相 交错 ， 
因此 所 有 事务 的 执行 结果 都 是 1。 


ОДООО0О000000000000000000000000000000000000000000 
ороброборобордорорбороровеаї р ООДЕХЕСОООДООООО000000 
МИ ТІПЕХЕСПООДОООО 


О000000000000004.4000000000000 
UUUUUUUUU 


UUUUUU0003-13000UMULTIUEXECOUUU00UUUUUUUUUODOD 
10000articte уоєе() ОДОДОО00О0000000000000006бч90 
оророборробро0р000000бча О0бОб00000000000000 


article уобе()ДД0000006бч90О00000000000000000000 
ОДООО000000000000000000000000000000000000000100 
post агёісТе () П0000000006.2.500 


ПО00000 


ОАеаіѕ=600000000000000000000000000004.4004.6000 
0D0000000000000Redis0000000000000000000000000000 
UUUUU10Uget_ artictes()UUUU0000000UUUUUURedisUUUU 
00002 60000000000000000000000000000 
get_articles ()000000002600002000 


ШЕЕ  ДОДООООООО000000000000000000000000000000 
О00000000000000000000Аеаіѕ$ПО0000000000000000 


3.7.3 000000 


О00КеаіѕПП0000000000000000000000000000000000рЕ:С)0 
О0000000000000000Аеаіѕ0/777/0ехрігаіопо0000000000000 
UtimeoutUUUUUUUUUUUUUUUU UUWOODtime to мер” В0000*00 
000000570ехрігеП”О000000кеаіѕ00000000000000000000 


О00000000000000000000000000000000000000000006.2 
007.1007.2000000000000000000000000000000000000000000 
ОДОООО00000000000000000000000000000000000000000000 
ОсопіаіпегобоОДОДОО000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000 


ОДОД00000000000000000000000000 Redis 000000000000 
ОДОД000000000000000000000000 Redis 000000 


03-1З0006еаіѕ$П000000000000000000000000000000 


03-13 ПП0000000Аеаіѕ00 


PERSIST Кеу- пате—— 00000000 
ТТІ. key -name—— 00000000000000 








prre и key-name seconds—— [0000000000000 
porr EXPIREAT key-name timestamp——[00000000000000UNIX 
EXPIREAT 

000 








PTTL Кеу-пате----ЮЮЮДОДО0000000000000000Веаїз 2.6000 





0000 


Бан > PEXPIRE Кеу-пате miLLiseconds 一 一 U0UUD0000000000000 
UUUURedis 2.60000000 
PEXPIREAT key-name timestamp-milliseconds——[0000 
PEXPIREAT | 
DODOUNIXOO000000000000000000DRedis 2.60000000 


00003-150000000000000000000 








00003-15 ПОКеіѕ=000000000000000 


>>> conn.set('kev', 'value') 


True 设置 一 个 简单 的 字符 串 值 ， 

>>> conn.get('key') 作为 过 期 时 间 的 设置 对 象 。 

'value' 

“З 如 果 我 们 为 键 设 置 了 过 期 时 间 ， 并 
rue вен: 

>>> time.sleep(2) ی‎ ЯМА 

>>> conn.get ( 1 key' ) ЖЕНЕ 4 | í o 

>>> conn.set('kev', 'value2') 

True 

>>> conn.expire('kev', 100); conn.ttl('kev') нерва ЈИ 

- 还 有 多 长 时 间 。 


ОДООПЕХРІВЕООДОДОООООО 


2.1002.2002.5000000000000000000000001000000000 
ОДООД0О0000000000000000000000000000000000000000 
UU000000000000000000000000RedisUUU0000U0000000000 
UUIDPUUUUUUUUUUUUUUUUUUUUUUUU2UUUUupdate єокеп()0 
UUadd to_cart()UUUU00000000UUUUUUUIDPUUUUUUUUUODD 
UUUUUUUUUIDPUUUUD 


D000ePUBw.COMUNUUUePUBw.COM (00000 
UUUUUUUUUUDUU 


3.8 ПП 


Д00веаїв ДОДОООДОООО000000000000000000000РУВІТ5НО 
ОДБ УВУСКІВЕПОО5ОВ ТОООДОДОДОМОІ ПІПЕХЕСОДОДОДООООСО 
ПП 


ПППППППППППППП-Ееді5  ДООООО00000000000000000000 
ППППТОППППППИПИПИППҺЕЕр://гесвіб.ію/сотптапа< ПП 


ОДО00000000000----ОО0000000000000000000000000010 
Орг200000000000000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
RedisU0000000000000RedisUU0U000D00 


® ПАеаіѕ000000000000000000000000000000000000000000 
UUUUUUUUUUUDU 
00000RedisUUIEEE 754000000000000 


© П00000рию11іѕһег( ) 000гип pubsub ( ) 000000000000000 
О000000000000000000000 


D000ePUBw.COMDNHUUUePUBw.COM 0000 
О000000000000 


рап б00000000 


000000 


UUUUUUUUD 
UUUUUUUUUU 
。DUUUUUU 
e Redis[|[| 


e П0000000поп-їгапѕасіопа! рірейпеП 
e 000000 


D0000000000000Redis00000000000000000000000000000 
Кеаіѕ000000000000000000006еаіѕП00000000000000000000 
О080000000000000000000000000000000000000Аеаіѕ= 000000 


О0000006еаіѕ000000000000000000000000000000000000 
0000000 Redis ООДООООДО00О00000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUU000000000000000000RedisU00000000000000000000D0UD 
000000 


О00000000000000Аеаіѕ$=р000000000000000000000000000 
UUUUUUUUU 


Оророр000веаї о роробордодоррооророркеаїб о 00000000 


MntitePUBw.COM(fitePUBw.COM (000 
О000000000000 


4.1 ШШ 


Redis ППОДОООД0000000000000000000000Л// 
Usnapshotting ПООДОДОДОООО00О0000000000000000020070700 
Паррепа-опіу НІеПАОРПОДООООДООООООО0О00000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООО00000000000 


ОДООООО0ОД000000000000000000000000000000000000000 
D000000000000Redis00000000000000000000000000000Redis 
ОДООООД000000000000000000000000000000000000000000000 
урвеаї 0000700" 00000000000000000000Веадїь0002.4000000 
О0000000000000Аеаіѕ=00000Аеаіѕ$П0000000000000000000000 
DUDUU 


О000000000006еаіѕП00000000000000004-100000000000 
О00000000000004.21.1004.1.200000000000000000000000000 
ОДО0000000 


00004-1 Кеаї[ ШШШ 


save 60 1000 
stop-writes-on-bgsave-error по 
rdbcompression yes 

dbfilename dump.rdb 


快照 持久 化 选项 。 





аррепдопіу по 

аррепдЕзупс evervsec 
no-appendfsync-on-rewrite по 
auto-aof-rewrite-percentage 100 
auto-aof-rewrite-min-size 64mb 


AOF 持久 化 
了 快照 文件 和 AOF 文件 的 
ЛЕВЕ o 








ALE af < 


ОДОП4-200000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ПОАОР 000 subsvstemi IIL URedis  НОПОДАОРООДОДОДОДО000 
UUU000UUUAOFUUUUUcompactionUUUUUUUUUUUUUUUUUUUUUAOF 
UUUUUUUUUUUUUUUUUUUUUUUUDUD 


4.1.1 (0000 


Кеаіѕ0ПООО00000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОД0000000 


О0000000000960#11епатерОО000000000009і гО000000000 
О000000000000000АеаіѕПОО000000000000000000006еаіѕП00 
UUUUUUUUUUUUUUUUUU 


Оробр0Ввеаї  000000000206800000000000002:350000 
ОДОб0000000003:0600кеаї р ПОоророоро0000003:08000000000 


0003 5О00О00000000003:060003:08000000000000Веаї 000000 
Дробрр000Кеаї 000002:350000О0000000000000000000000000 
О000000000Аеаіѕ 0003500000000 


UUUUUUUUUUUDUDU 


UUU000000URedisUUBGSAVEUUUUUUUUUUUUUUBG2AVEUUUUD0DD 
D00000000000000WindowsD000Redisg00fork“0000000000 
ОДООД0О0000000000000000000000 

Дрр00000веаї  ОП5АМЕПОООООООООДО5АМЕДООВеаЬ1Н ОГО 
О0000000000000000005АМЕООО00000000000000000000 
ВС5АМЕПОООО000000000000000000000000000000000000 
000000О5амер)0000О5аме 60 100090 дрвеаї 0000000 
00000000760000010 осордр"оророррбровеаї 00000 
ВСЗАУЕОООО000000005амер)00000000005амедррр 0000000 
ПППППКеа!5[ПППППВб5А\МЕППП 

URedisi IISHU ТООММОДДОООДОООО000000000007ЕАВМОДОДОГ 
ООО5АМЕПОДОООООДОООДООООООО0ОДО0О0005АУЕДОДООДОДОО 
О0000 
О006еаіѕП0000000Аеаіѕ$П0000000005ҮМСО000000000000 
ПО0000000000000865АМЕППООО00000000000865АУЕПП000 
О0000000865АМЕПОО0000000000004.200 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО00000000000004.1.200000АОРО000000000000000000000 
ОДОДОО00000000000000000000000000000 


100000 


ООДОД0000000000000000000000000000000000000000000 
0000000000О5аме 900 100)00000О5амерудовеаї 000000000 
ООООбОО000865АУЕДОДОООДОО000000000000000000000000900 
ОО00015000000000000000000000000Аеаіѕ$ 0000000000 
ВС5АМЕПЛО 


ОДОООО000000000000000000000000000000000000000000 
ОДОО000000000000000000000005 амердоо0О0000000000000 
ОДООООО0000000000000000000000000000000000000000000 
ОДОООО000000000000000 


20000000000 


О00000000000000000000000000000000000000000Аеаіѕр 
ОДООООО00000000000000000000000000000000000000000000 
000000000000000000О5ауе 3609 1036990 ПДО0000000000000 
ОДОООО000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
О0000000000000000004-200000000000000000000300000000 
UUUURedisUUUUUUUUUUUUUUUUUUU0000000UNne000000 
Пса!раско000000000000000000000000000000000000 


00004-2 process 1095 ( ) ПОО000000000000Аеаіѕ00 


获取 文件 当前 的 
处 理 进 度 。 





def process logs(conn, path, callback): 
current file, offset = cenn.mget( 
'proqress:tile', 'pregress:position') 


pipe = сопп.ріре1іле () 


< 一 日 志 处 理 函 数 接受 的 其 


中 一 个 参数 为 回调 函数 ， 

这 个 回调 函数 接受 一 个 
Redis 连接 和 一 个 日 志 行 
作为 参数 ， 并 通过 调用 流 





水 线 对 象 的 方法 来 执行 
Redis 命令 。 
通过 使 用 闭 包 /> def update progress(): | 
(closure ) ЖЖ pipe.mset (| 对 止 在 处 理 的 日 志 
少 重 复 代码 。 'progress:file': fname, 文件 的 名 字 和 偏 移 
ас | М 'progress:position': offset 量 进行 更 新 。 
这 个 语句 负责 执行 实 -> pipe.execute() 有 序 地 遍历 各 个 
际 的 日 志 更 新 操作 , 并 i I 日 志文 件 
for fname in sorted(os.listċir(path)): зо Р 9 
5522. if fname < current file: 
目前 的 处 理 进度 记录 | continue х 
5 赂 过 所 有 已 处 理 的 
到 Redis 里 面 。 inp = cpenios.path.join(path, fname), пој 日 志文 件 。 
在 接着 处 至 一 个 因为 if fname == current file: 
ни та SE N [ inp.seeklint (offset, 10)) 
ja з else: 
处 理 的 日 志文 件 时 ， 略 «РРР жайна 
ы ХМ То 
THAR 容 。 ك‎ 
анине: current_file = None 
кн е p for lnc, line in enumerate (inp) : 更 新 已 处 理 内 容 
В 2 0а ТХІР callback (pipe, lire) HAEE: 
行 组 成 的 序列 ， 并 返回 任 offset += int(offset) + len(line) « 
意 多 个 一 元 组 ， 每 个 一 元 组 志 行 或 者 


包含 了 行 号 1по 和 行 数据 
line， 其 中 行 导 从 0 开始 。 


update progress() 
update progress{() 


inp.close() 


if not (lno+1) 3 1000: 每 当 处 理 完 1000 个 


处 理 完整 个 日 志文 件 的 时 候 , 都 
更 新 一 次 文件 的 处 理 进 度 。 


D0000000000000Redis000000000000000000000000000000 
О00000000000300000000000000000000000000000000000000 


00000 


30000 


URedisUUUUUUUUUUCBUUUUUU00000000000000RedisUUUDUD 
UUU000000000000000000000000000000000UUUURedisU00000 
О000В65АМЕВОООО0000000000000000Аеаіѕ000000000006В00 
О0000000000000Аеаіѕ=0000000мігёџа! паспіпердо00000 
ВС5АМЕППОООО0000000000000000000000000ҹмігёџа! 
гппетогу000000Аеаіѕ=00000000000000 


ООВе5АУЕДОДОДОДОДОДОДОВеаїь ДОООООДОООДОПУМУмате 
UUU00UKVMD00000RedisU000000CB0O00000000000000UUUUUUDU 
10020000000xen0U0000000000000RedisUUUU00UCBO00000000 
UUU00000000002000300UUUUUUUUUUURedisUUUUU20 евор000 
UUU000U0UUUBC2AVE0000000000RedisUU2000400000UUUUUUUDU 
Хепо000000ЕС2ПП0000000000000000000000000000000000 
Кеаіѕ0ПАП6О00000000000000000000000 


О000Аеаі$ПОООО00000000000000000000000000000 
ВС5АМЕПОЅАМЕПООО0000000В65АУЕПОПООО0000000000000000 
О0ВСЅАМЕППООООБО00000000000005АУЕОО000АеаіѕВО0000000 


ОДОД0О00000000000000865АМЕДОДОДОДОДОДОВеаїЬООДООГО 
О000000000005АМЕОО0000000865АМЕПОО000000000000 


0000000000000068 еву)р0Хепро0000000050 GBOO0 
Redis( ППОДПОВСе5АУЄ ОДОДОО0000000000150000000000000015 
П200000005АУЕПООЗО500000000000000000000000000000000 
ОО0000000000000000003000000000Аеаіѕ0000005АМЕПВ0000 
ОДООООО0000000000000000000000000000 


ОДООД00000000000000000000000000000000000000000000 
ООООО0000000000002 50001 0000000000000000000000000000 
ОО000АОҒООО00000000000000000000000 


4.1.2 АОЕҒГТ(| 


ПО000АОРООО00000000000АОРООО0000000000000000000 
КеаіѕОПОООО000000АОҒОО00000000000000АОРО000000000 
АОРП0000000000004-100Оаррепаопіу уез р000000004-2000 
аррепаїзупс ПООДАОРОДОООДОДОДО 


0000 О000000000000003000000+#11е .мгі+е 0) ООО00000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00О0000000000000000000000000000000000000000000 
file. flush () ВО0000000000000000000000000000000000000 


ОДООООО0000000000000000000000005Упе 0О00000000000000 
ОДООООО0000000000000000000000000000000000000000000 


04-1 аррепаїзупс ДОО000 


em 
ИИ 


О00000аррепа#ѕупс атмауз руд ОДСОДОКеаї  ОДОДО0ОСО 
ОДООО0О0О00000000000000000000000000000000000000000000 
П0Аеаіѕ$П000000000000000000000005$ріппіпо аї кОДООДОД00000 
Д0000000200р0000000000501ід-5баєе агімед)550000000000000 
00000 


DUOUUUUUUUappendfsync always П0000000000000аррепа+ѕупс always] 


0000000Веаї5000000000000000Оаррепаї syn сДОДОООООООООООО0000000000000 
0000000050770%гієе агаріїйсаєіопорбоОООДОО0000000000000000000000000 
































О000000000000000000000аррепдтѕупс ехе гуѕес000 
Кеаіѕ0П0000000АОҒО000000Кеаіѕ000000АОҒО000000000000 


ОООД000000000000000000А0Р2000Веаї  ДОООООООООО00000000 
UUU000000000000000000000000000RedisUUU0000000000000 
UUUUUUUUUU 


0UU0000UUUappendfsync подбддОоПОВедї  ДОПАОРДОДОДОООО 
О00000000000000000000АОҒОО000000000000000000Аеаіѕ00 
О00000000000000000000Аеаіѕ$ПО00000000000000000000000 
О000000000000000000000000000000006еаіѕП000000000000 
КеаіѕОП000000000000000000000000000аррепа+ѕупс пор) 
О0000000000000аррепа#ѕупсо00003000 


ОПАОРООО000000000000000000000000000000000000АОР 
0000000----ПОДАОРОДОДОООП 


4.1.3 ПД/ПДАОРЄПО 


ОО000000АОРОООО000000000000000АОРО0000000000000 
ULIILLI 000000000000000000000000000000000000000000000 
ПАОРОДОДООО000О0000000000000Веаї  ДООООДОДОООДООДАЮР 
Дррброрр0веаїд р ООДАОРОДОДООООООДООО0000000000000А0Р 
О000000000000000000000000000000Аеаіѕ 0000000000000 
АОҒООО000000000000000000АОРОО000000000000000000000 
П0000 


ОООДАСРООДОООДОДОДСО00000Веаї  ПОВСВЕМ/АТ ТЕАОРОО000 
ОООО000АОРО000000000000гемигієеПАОРОООДАОРОДООООДО000 
ООВСВЕМ/А Т ТЕАОРОДООДОВФ5АУЕОДООООООООДОДОВеа ООСОГО 
ОО00000000000АОРОО0000000АОҒООО00000000000000000000 
О00000000000000000000АОРОПООО000000000000000000000 
АОҒООО000000000000000000000АОРОО0000АОҒОО000000000 
О00006ВО00АОҒО0000000000000папәр000 


О00000000000ѕамероо0000865АМЕПОПАОҒОО00000000 
аиїо -ао? - гемгіїе - регсепїадеПачїо -аот - гемгіїе- тіп - 
ѕіғеПО0Ооо000ВсАЕМАІТЕАОҒДОО00000000Аеаіѕ$0000000ач+о - 
aof-rewrite-percentage 100[аиїо - ао? - гемгі+е-тіп - 
size 64тЬППОООДАОРОДОДОООАОРОДОДООГОбВА МВПППАОҒОПИП 
ОДОО00000000000000010092П00000Кеаї ДДОВОВЕМАІТЕАОРОДО 
ОДАОРОДОДОДОДС0О0000000ОПачго - ао? - rewrite - 
регсеп' адерр00000199000000000Веаї  ПАОРООДОООД0О0000 
ороборорр000веаї о ророброороо00000000 


ОО0000АОРООО000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О000000000000000000000000АОРОО000000000000 


О000АОРОООО000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000 


D000ePUBw.COMUNUUUePUBw.COM 00000 
ОО0000000000 


4.2 ПП 


ОООО000000000000000000000007/0геріїсайіопП ДООО00000 
ОДООООО00000000000000000000000000000000000000000000 
ОООД000000000007007/00плазсеРородд 00/05 амерроробо00000 
О000000000Аеаіѕ000000000000000000000000000000000000 
О00кеаіѕ$П000000000000006еаіѕ000000000000 


ООАеаіѕ$ПрООООООООООООоО00000000000000000000000000 
ООО000000000000000000000000000000000000000000000000 
Ороборобррбрордодордобродордоо010000000000Веаї500 
Піпѕёапсе010000001000000 


SUNIONSTOREI[IIII] О00Аеаіѕ0000000000002.4 GHz 
О0200000000000010 0000000000UU>UNION2>TOREUUUUUUUU020 
оСоррорбрр000000Веаїв 000000 


ОДООО0000000000000000000000070000000000000000000 
О006еаіѕ$ПП000000000000000000000000000000іпі@а! сору of 
the аагадППОДО000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000 


ОрО00000000веаї ДО0000000000Кеаї ророборобободо0 
4.2.1 URedisUUUUUUUUUDD 


4.1.1000000000000000000000000000000В65АМЕООООООО 
ОООД00000000000000000000000000004-120000041 7000 


4671 епатепдддОВОДСОООООООДООООДОВеаЇБО/ОЮ ООСООГООЮ 
[]writable[|[] 


ОООО00000000000000000000000000000000005 (амеот 
UUU000U0UUURedisUUUUUUUUUUUUUUs Laveof host рог+000000 
Дрр0веадї оророоб0000001РОДОООООДОООДОДОД0000000Веаізо) 
UUUUUU000002?>LAVEOF по оперббрООООООб0О0000000000000 
О000000005ГАМЕОР host рогебООДОДОООБОДОДОООО0О 


О0Аеаіѕ0000000000000000000000Аеаіѕ=00000000000000 
ОДОООО0000000000000000000 


4.2.2 Кейі 0000 


ОДООДО0000000000000000000000000000000000000000000 
О000000000000000000004-2000000000000000000000000000 
О0000 


П4-2  00000000000000 





000000 000000 
0000000 О0000000000000005ҮМСП0 


ООДОВО5АУЄДОООДОДО0 ОДОДОДО00000000000000000000000 
ВСЗАМЕООДОО00000 ОДОД00000000000000000000 














ОДОбОО0000000000000000 





ОДООД00000000000000000000 
ОДОДОД00Д000000000000000000 








000000 


DDO0000000000dg000000000 | О0000000000000000000000000000 
ОДОООО00000000000000 ОДОО000000000000000 











1 
ВС5АМЕПОДОДООДООО00000000 | ООО00000000000000000000000000 
й 





000004-20000006еаіѕ$П0000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
RedisUU000000000000000000000000UUUUUUUUUUUUUUUUUUUUD 
50%П165%П1000030%045%П000000865АУЕПО0000000000000 


О0000000000000000000000005АМЕОР host рог+0000 
Кеаіѕ0ПОО00000000000000000Аеаіѕ=В00005САМЕОРПО0000000 


ОООД000000005- АМЕОРОДДДООДОВеаїЬПОДОДОООООДОДОДО0000 
ОДАОРООООДОО000000004-200000000000000005 АМЕОРООООО 
RedisU000000000000000000000004-200UUUUUDU 


UUUUUUUUUUUUUUUUUUUUU О000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUU 


LUDDURedisl Д0000000тазеег-тазіег replicationi) DDRedisDDD0DD000000000 


05 АМЕОРО00000000000зіаміпд options00000000000000000000Redis0000000000 
ОД0000070/7/0паціїві-плазіег replication ОДООООДО0000000000000000000000000000 
ОБОДА ОО0000000000000Веаї ДДО0ОО0000000000000000000000000000000000 
ОДООО00000000000000000000000000000000 


























ООД0О00000000000000000000004-З00000000000000 


П4-3 ПООО00000000000000000000000000000 





0000000000000 
0 





000000 





04-200030000 ОДОО0ОД0000000000000000000000 


04-20003000000 | 000800000000000000000000005000000000000000000 
000000000020005 








О00000006еаі$ПОО00000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО0000000 


4.2.3 ПІП 


ОДООД000000000000000000000----О000000000000000000 
D00000000000000000Redis00000000000000000000000000000 
ОДО0000000000000000Оплазіег/зіаме сһаіпіпдП П 


ООО000000000000000000000000000000000000000000А0 
00000 УДО000000Х00004-20000400000000000 2000000000 YI 
О0000000000Огезупе П 


UU00000000000000000000000000000000RedisU00000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUU000U000000000000000000000000000000UUUUUUUUURedisD 
UUU0Umasterslave поде ДДОбД0000000000000000004-1000 


Redis 主 服务 器 


a‏ | کے 


从 服务 器 1 从 服务 器 2 从 服务 器 3 


从 服务 器 a 从 服务 器 b 从 服务 器 c 从 服务 器 d 从 服务 器 6 从 服务 器 f 从 服务 器 g 从 服务 器 h 从 服务 器 i 


04-1 00RedisUU0U000masterslave replica їгее00000000030000000000000000090 
0000 








ОДООО00000000000410000000000000000000000000 
Кеа ПДО00000Проз5і61)0000000геазопавбіе ПДОб000000000 
000000004.1.200000000АОҒОПО000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
D0000010000000000000000AOFO00000000d000000000000 


ОДООООО000000000000000000000000000000000000000 
appendonlv уевПППаррепат5упс еуегузесрОДОДО00000000 
ОДООО0000000000000000000000000000000000000000000000 
ОДО0О0000000000000000000000000000000000000000000000 
ОДО000000000 


4.2.4 (00000 


ОДООО0О000000000000000000000000000000000000000000 
ОО0000000000Пипіаме dummy маһме ПОП 
ОДООООД000000000000000000000000000000000000000000000 
О00000000000000АОғП00Аеаіѕ$ПО00000000000000100000000 
ПО000000000000000000001РорО000000 
aof pending bio #ѕупсОПОО00000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
0004-3000000000000000000 


00004-3 wait for з5зупс()ПД 


def wait_for_sync(mconn, sconn): 


identifier = str(uuid.uuid4()) 将 令 牌 添加 至 主 服 务 器 。 
mconn.zadd('sync:wait', identifier, time.time()) < 
while not sconn.info()['master_link_status'] != 'up': «РУ 如 果 有 必要 的 话 , 等待 
time.sleep(.001 Ж 
OE 从 服务 只 完成 同步 。 
while not sconn.zscore('sync:wait', identifier): а FN и 
Nanna ШІ вене. 
deadline = time.time() 4 1.01 пж 
while time.time() < deadline: | 最 多 只 等 得 1 秒 。 
if sconn.info()l'aof pending bio Ебупс!| == 0: š 
break 检查 数据 更 新 是 否 已 经 被 
time.sleep(.001) 同步 到 了 硬盘 。 
mconn. zrem ('sync:wait', identifier) 5 
mconn. zremrangebyscore ('sync:wait', 0, time.time () -900) | 
清理 刚刚 创建 的 新 令 牌 以 及 之 前 可 能 
留 下 的 旧 令 牌 。 


INFOUUUUUUUU  ІМРОУДОДОООООКеаїЬОДОДОДОДОДОООДОО 
ОДООООО0000000000000000000000000000000000000000000 


ОДІ МРОДДОЮДОПВеаї ОДОДОДОООО0ОО00000000001МРеО0000000 
0000 


0000000000000маї є for ѕупс ( ) П000000000000000000 
ОООДО0000000000000005упс wait 25ЕТПО00000000000000000 
ПОООО0О0О000000000000000000000000000210000000000000000 
ПООО000000000000000021000000000000000000000000000000 
ОДОООО000000000000000000000000 


О00000000АОРО000000000Аеаіѕ= 000000000000 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


4.3 ПШПШ 


О0000000000000Аеаіѕ00000000000000000000000000000 
О000000000Аеаіѕ00000000000000000000000Аеаіѕ 000000000 
DO00ACID*0000000000000000Redis000000000000000000000 
0000000000000Redis000000000000000000000000000000000 
О0000000000000000000000000000000000000000000Аеаіѕ00 
ОДООООД000000000000000000000000000000000000000000000 
000000 


4.3.1 ППППППАОҒПГПП 


ОО000000000АОҒООВО00000000000000000000006еаіѕ 0000 
000000геа15 - сћеск-аоТ геа15 - сћеск- дитро000000000000 
UUUUAOFUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUD 


S redis-check-aof 

Usage: redis-check-aof [--fix] <file.aof> 
S redis-check-dump 

Usage: redis-check-dump <dump.rdb> 

5 


О000000 геа 15 -check - ао Т000000 - - ":хОДОДОДОДОАОЄОО 
ОО00000000АОҒОО000000000000000АОҒОО0000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О00000000000000000000АОРО0О0000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
О00000000000000000000000000000000000005НА11000 
ЅНА25610000000000000000пихО000тіхО0000005һа15итр 
ѕһа256ѕит0000000000000000000 


0000сһескѕит00000һаѕһ) 02.6000006еаіѕ$0000000 
ОО0000000САКСӨ40000САСОПООО00000000000000000000000 
5 НАООООДО000000000000000агбіїгагу еггого00000000000000 
ОрОбр000000000000000064000000000005иб5еєдПОО0000000 
САС64ПДО00005НА105НА2560ППО000000000000000000 


ОДООО0О000000000000000000000000000000000000000000 
О0000000Аеаіѕ000 


4.3.2 UUUUUUUU 


О0000000000000006еаіѕПО0000000000000000К6еаіѕ 00000 
ОДОДООО0000000000000000000000000000000000000000000 


ОДООООО00000000000000000000000000000000000000000000 
ОДОО0000000000 


ОДАОВОДОДОДООВеаї ПОООДАОВеаїь ДДО000080Веаї 000 
UUUUUUUUUUAUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUODD 
RedisUU0UC000000000 


UUUUUUUUU00000UUUUUBUUUU>AVEUUUUUUUUU000000UUUUU 
D0000000000C00000C0000Redis0000000B0000C00000*00000 
4-40D0000dD00000dddo0 


00004-4. OUUUUUUUUUUUUUUU 


userevpn-master ~:$ ssh rootəmachine-b.vpn 











` т ур paz- ци 
Last login: Wed Маг 28 15:21:06 2012 from ... | 通过 VPN КРИЗИ 
rootəmachine-b ~:5 redis-cli < i 
redis 127.0.0.1:6379» SAVE 执行 ЗАМЕ 命令 , 并 在 命 | 启动 命令 行 Redis 容 户 端 
ок 令 完 成 之 后 ， 使 用 QUIT | 来 执行 几 个 简单 的 操作 。 
еее reġ зө = 命令 退出 客户 端 。 
rootamachine-b ~:$ scp КҮЗІ у-у НО ZS š 
> /var/local/redis/dump.rdb machine-c.vpn:/var/local/redis/ 将 快照 文件 发 送 至 新 的 主 服 
dump .rdb 100% 525MB 8.1MB/s 01:05 务 器 机 器 C。 
rootəmachine-b ~:$ ssh machine-c.vpn 
Last login: Tue Mar 27 12:42:31 2012 from ... 连接 新 的 主 服务 咒 并 启 
rootëmachine-c ~:$ sudo /etc/init.d/redis-server start B Кейі, 
Starting Redis server... 
rootamachine-c ~:5 exit 
rootdmachine-b -:5 redis-cli ЖЛ В EJ Redis, 
redis 127.0.0.1:6379» SLAVEOF machine-c.vpn 6379 证 它 将 机 器 C 用 作 新 的 
ок 主 服 务 器 。 


redis 127.0.0.1:6379> QUIT 
rootomachine-b ~:5 exit 
userdvpn-master ~: $ 


Дрор4-400000000000000009піхоробііпихороробО0000 
ООО00000000000000000800005АМЕООООООДООВОДОДОСОД0О00О 


З АМЕОРЛОД 


ОДООД0О00000000000000000000ипп0000000000000000000 
D000000000000000000Redis0000000000000000000000000000 
UUU000000000000000000000000000000000UUUURedisU00000 
UUUUUUUUUUUUUUUUUUDU 


Redis Sentinel Redis зеп пе р0ОрОО Кеа 5000000000 
О0000000000000000000000ғайоуег00000010000Аеаіѕ 


Ѕепіпе[[ 


ОДООО0О000000000000000000000000000000000000000000 
ОДООО0000000000 


ПродеРовм. СОМІДОДерРувм.СсОм ДОООП 
ОО0000000000 


4.4 Redisiji) 


ОДОООО000000000000000000000000000000000000000000 
О00000000000000Аеаіѕ=0000000000000000000000000000000 
0000 


Redis ППОООООО00000000000000000000000000000000 
ВЕСІМОДД00000000ОсопзівсепєДОДОООООО000000000000 
СОММІТОПОДООДДООД0ОД0В01 1. ВАСКОДОДОДОП 


ОАеаіѕ$ПОООО0О00000000000000000000000000003.7.20000 
UUUURedisUUUUUUUUMULTIUUUUUUUUUUUU0U0000000UEXECOO00 
UUUUUU00000UEXECUUUUUUU0U00000UUUUUUUUU00000000UUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUU00000000000000000000000000000Utwo-phase сотті0 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОДОО00000000700000000000700000000000000000000000000 
ОДОДООО0000000000000000000000 


0000000000000 О0Аеаіѕ=00000000000000000000000000 
ОДЕХЕСОДООООООДООООДОРУЄВОПОДОДОДОДКеаїОДОДОДОДООООО 
ПО000000000000000М0ЕТ7І0000000000000000000ЕХЕСПО0000 


IRedis  дОООООДОДООО0000000000"00000000000000000000700 
ОДОД00Л0/Оріреї піп дрООООДОООО00Кеаї  ПОДООДОООД000000 
Кеа ПДОДОО000000 


ППППППЕаКе сатердродрОуоч ТммієасеПОДО000000000000 
UUU000U00000000000000000000000Fake Game0000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООДО000000000000000000 


4.4.1 БООДОООООО 


04-2П0000000000000000000іпуепёогуроо0000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДО00000000000 


users / ——əƏ ç ° ,[ a — hash inventorv:17 —————— set 





Шеті! 


пате Ғгапк неті 


funds ' 43 неті 





изег5:27 —— PTP hash inventorv:27 —— F set 





ltemO 
ltemP 
ltemQ 


name Bill 
funds 425 








04-2  ООООДОДО000000Ргап кОАЗОДООООООДОООО0000000000 





ОДООООО000000000000000000000000000000000000000000 
ОДОДООО000000000000000000000000000000000000000000000 
0007 00000000000000000000 


ПООО00000000000000000000000001000001р00000000000 
О00000000000000тагкеё 25ЕТОО00000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ПО0000000000000000000000000004-З000000000000000000 


market: ——ə Y hn zset 


ПетА4 | 35 






ltemC.7 , 48 
ltemE.2 | 60 
ето. 3 73 
正在 销售 的 物品 / 物品 的 售 价 
物品 的 拥有 者 


П4-3 000000000UUUUUUU400UUUUtemAD0UU3200 





ОДООООО000000000000000000000000000000000000000000 


4.4.2 UUUUUUUUU0 


ООДОО00000000000000000МИ1 ПІОДДЕХЕСОДООООО0000000 
МА ТСНООООООООООООУММА ТСНОО 15 САКОООДОДОООМА ТТ СНОООООО 
ПО000000000ЕХЕСПООО00000000000000000000000000000000 
ОО00000000000000ЕХЕСОПОО000000000000000000000000000 
ППППППППППППМАТСНПМОЛ ТІ/ЕХЕСП ОМАУАТСН/ОТ5СААООООДОООО 
ОДОДООО00000000000000000000000000000000000 


ПООРІ5ЗСАВОП ОММАТСНОООООМАТСНОООООООМО СТ ТООООО 
00000000ОгезебПОДО000 15 САКРПОООООМО ТТОДОООООЕХЕСОПО 
UUUUUU000000000UUUUUUUUWATCHUUUUUUUUUUUUUMULTIUUUUOD 
UUUUUU000000000UUUUUUUU00000UDI>CARDUUUUUWATCHUUUUUDD 
О00000000000000000015САКРПО0000000000000000000000 
МИГ ТІ/ЕХЕСППОМИАТСНППППППППППППППППОІ 5САНОП 


ОДООООО00000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
4-5П000000000000 


00004-5 list_item()[] 


def list item(conn, itemid, sellerid, price): 


inventory = "inventory: $s" $sellerid 
item = '$s.3s'$(itemid, sellerid) 
end = time.time() + 5 
pipe = сопп.ріре1іпе () KUIPERREN 
while time.time() < end: яму E 检查 用 户 是 否 
如 果 指 定 的 商品 不 在 ”try: à 仍然 持 有 将 要 
ЕРЕ ЕЖЕН, ЛБ pipe.watch (inventory) fi 被 销售 的 商品 。 
ҮРГЕН if not pipe.sismember (inventory, itemid): 
AAF IEX UK НІК > pipe.unwatch() ы Ре 
视 并 返回 一 个 空 值 。 Tatu МӘНЕ 如 果 执行 execute 方法 没 
| ا‎ 有 引发 WatchErrcr 异常 ， 
pipe.multi ЖЛ 4 TEN 
把 被 销售 的 商品 pipe.zadd('market:', item, price) 那么 说 明 事 务 执行 成 功 ， 
添加 到 商品 买卖 pipe.srem(inventory, itemid) ЗЕН. КРОНА HUH E 
市 场 里 面 。 pipe.execute() < 一 经 结束 。 
return True 
НИЯ ЕСЕ ЕЕ 


except redis.exceptions.watchError: 
pass 了 变化 ， 重 试 。 


return False 


1151 іїет( ) ПО00000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОООД000000000000000000000000м' 1еоробр000МмАТНОДОГО 
ОДООО00000000000000000000000000000000 


04-80000РГгап кО001001700009700000001/сепо МОП 
list 1іжет( ) 00000000 


watch('inventory:17') 








sismember('inventory:17', 'itemM') 


inventory:17 


Кеті. 
кетм 
ltemN 


监视 包 庄 发 生 的 任何 变化 。 





inventory:17 


кеті. 确保 被 销售 的 物品 仍然 存在 于 
кетм Franka 3 8 Щі. 


ltemN 


一 Market: ——ə x —n.p Zset 一 





М 


zadd('market:', 'IitemM.17', 97) 






НетА. 4 | 35 


ltemC.7 | 48 
ItemE.2 60 
ltemG.3 | 73 
ltemM.17. 97 








因为 没有 一 个 Redis 命 令 


| 可 以 在 移 除 集合 元 素 的 同 
| 时 ， 将 被 移 除 的 元 素 改名 
| 并 添加 到 有 序 集合 里 面 ， 
| 所 以 这 里 使 用 了 ZADD 和 和 
SREM 两 个 命令 来 实现 这 
згет(іпмепіогу: 17", 'itemM') 一 操作 。 

іпуепіогу: 17 —- зеі 

кепі. 

(т) 

ltemN 





04-4 list item(conn, 'ItemM', 17, 97)00000 


ОДООООО000000000000000000000000000000000000000000 
ПО000000000000000000000000000000мАТСНОВОО00ЕХЕСО000 
ОДООООО00000000000000000000 


ОДООО000000000000000000000000000000000000 


4.4.3 (000 


00004-600ригсһаѕе item( ) ООДОООООО00О000000000000 
ПО000МАТСНОООООО000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
О0000000000000000ма+сһЕ r го ГОЗОООООООООООО000000000 
1000 


00004-6 purchase іїет()ПД 


def purchase item(conn, buyerid, itemid, sellerid, Іргісе): 


buyer = 'users:$s'iżbuverid 
seller = "users:%s"%sellerid 
item = "%8.%s"%(itemid, sellerid) 


inventory = "inventory:%s"*buyerid 
end = time.time() + 10 
pipe = conn.pipeline() 


while time.time() < end: 对 商品 类 卖 市 场 以 及 头 家 的 
try $ ЖАЯ 息 进行 监视 。 

pipe.watch("market:", buyer) 

price = pipe.zscore ('market:', item) 检查 买 家 想 要 购买 的 商品 的 

funds = int (pipe.hget (buyer, "funds")) ” | йе š 

if price l- lprice or price > funds: 价格 是 各 小 现 了 变化 ， 以 及 
pipe.unwatch() ЗЭК ЖЕТЕН В АЗК 
return None 这 件 商品 。 


pipe.multi() 
pipe.hincrby (seller, 'funds', int(price)) 先 将 买 家 支付 的 钱 转 移 给 去 
pipe.hincrby (buyer, "funds", int(-price)) | ; тей 

家 ， 然 后 将 被 购买 的 商品 移交 


pipe.sadd(inventory, itemid) 


pipe.zrem("market:", item) 给 买 家 。 
pipe.execute() 
return True 
except redis .exceptions .WatchError: NEE УЫН асылды лі 
чаю 卖 市 场 在 交易 的 过 程 中 出 现 了 变 


1, ДУДИН ТЕЗИ 


return False 


ОДООООО000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000 


ОДООО0000000000000000000000000000000000000000000 
ОДО0000000 


ОООО000000000008И10001002 700000Ргаплкррооооо 
сег МП04-5004-600000000000000000000000 


watch('market:', 'users:27') 






market: 一 ə— h s ho  s— 对 物品 买卖 市 场 以 及 Bi 
的 个 人 信息 进行 监视 。 
ltemA.4 | 35 
МетС.7 | 48 
ltemE.2 60 
ltemG.3 73 
ltemM.17: 97 
users:27 
name Bill 
funds ' 125 
验证 物品 的 售 价 是 否 并 未 改变 ， 
price = zscore('market', 'ItemM.17') 以 及 Bill 是 否 有 足够 的 钱 来 购买 
该 物品 。 


funds = int(hget('users:27', Чипаз')) 
price ! = 97 or price < funds? 


П4-5 ПОООДОД00000000000000000000000000000000000000000000000000000000 
00 


market: ~  zset 








zrem('market:', 'ItemM.17') 
sadd('inventory:27', 'ItemM') 


ж inventorv:27 ——ə > set 


ето 
ltemP 
ето 
кетм = 











ЖА 21JBillB5 €) Ж 88 Hic 


users:27 ——əƏ——ə  ]Ü v hash 









Bill 
28 





name 
funds 








hincbry('users:27', 'funds', -97) 


hincbry('users:17', 'funds', 97) 











users:17 





Bill 
140 





name 
funds 





将 Bil 支 付 的 货款 转移 给 Frank。 


04-6 QO0000000000000000000000000000000000000000000000000000000000000 


0UU000000004-60000000000000000market ZSETIDUBIDDULI 
UUWATCHUEXECUUUUUUUUUUUUpurchase item( ) ОДОДО0000000 


ОДОО0000000000 


ILLIRedis ДПОДОДОДО000 О0000000000000050:10 
SELECT FOR ОРБАТЕООООООООДООДОО00000000000000 


ОСОММІТОДОООДОВОЇ ІС ВАСКОДОДОДООООООООДОДОООООО000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000 


О000000000000000000Аеаіѕ$=00000000000000000000000 
МАТСНОООО00000000000Аеаіѕ=00000000000000000000000000 
ООМАТСНОПОООО00000000577Порёїтіѕіїс Іоскіпд ОДОДО000000 
О000000000577Преѕѕітіѕ іс Іоскіпа ППОДООО00000000000000 
ОДООО00000000000000000----ОС00000000000000000000000 


ООДОО0000000МАТСНОМОЇ ТІПЕХЕСООООООООООО000000000 
ОДООООД000000000000000000000000000000000000000000000 
ООДОО0ОО0000000000000000000000700000000000000000000 
0000 


ОДООООО00О000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000 


ПродеРовм. сОМДПОДерувм.СОмМ ДОООП 
ОО0000000000 


4.5 UUUUUUD 


ОЗОДОДООМУЇ ТІ ПЕХЕСОДПО000000700700--- MUL ТІОЕХЕС 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000 


П20000000000000000000000000000Ҹ6ЕТОМ5ЕТОНМСЕТр 
НМЕТЦАРОЅНПЕРОЅНО5АРРО2АРОППО00000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUnon- 
transactional pipelineUUUUUUUUUUUUU0U000U000000000000000 
00 


ОДООО0О000000000000000000000000000000000000000000 
О0000000000000000000000000М0ЕТІПЕХЕСО000000000М0ЕТ1І 
ПЕХЕСО00000----ОООООО0О00000000000000000000000000000 
ОООД000000МОЇ ТТ0ЕХЕСООО00000000000000003004.4000000 
ПООДООПРУРОПОДОМОЇ ТІПЕХЕСООД 


pipe = conn.pipelinel) 


ОДД000Пріреї і пе () 0001 гиероДО000000000000000000 
МИ ТІПЕХЕСОДОООДОООООООО000000000000ріреї!їпе()000 


Ра! sel р ОДО0000000000000000000000000000000000МУЄ ТІП 
ЕХЕСОДОДООДОО000000Веаїборророророророборобородророоо 
ОДООООО00000000000000000000000000000000000000 

ріреїїпе()ПД00РАТедд0000Веаї  ДООООООООДО0О0000000 


0002.1002.50000000000000Пирдате бокеп ( ) 00000000 
О000000000000000000000000000000соокіеП00004-70000000 
02.500000000Оирдате +океп ( )000000000000000200050 
Кеаіѕ0П0000000Аеаіѕ=000020005000000 


00004-7 0002.500000Пирдаїе +океп ( ) 00 


创建 令 牌 与 已 登录 用 def update token(conn, token, user, item-None): ЕНУ: 
Ew = timestamp = time.time() 4 
тен. L- - 
户 之 问 的 映射 М 


conn.hset('login:', token, user) 
conn.zadd('recent:', token, timestamp) 


把 用 户 浏 览 过 的 商品 if item: 
记录 起 来 。 > conn,zadd('viewed:' + token, item, timestamp) 
г> conn.zremrangebvranki ''viewed:' + token, 0, -26) 
u a < 


最 新 浏览 的 25 件 商品 。 


记录 令 牌 最 
后 一 次 出 现 
的 时 间 。 


conn.zinerbv('viewed:', item, -1) < A k 
на 





览 次 数 。 


UURedisUWeb0UUUUU0UUU000U0000U000UU00UU00UUU00UUUUD0 
UU00002000200U00Uupdate token ( ) В0000000201000000000 
Оробороррмуерродроор00000100р50000000000000000000000 
бророрбдбродр000000Пирдаєе token ( ) 000000000000000 
ООО00000000000000000000000000004-8000 
update token ріре1іпе( ) 000 


00004-8 update token р1ре11пе()ПП 


def update token pipeline (conn, token, user, item-None): 
timestamp = time,timef) 


pipe = conn.pipeline (False) 4 设置 流水 线 。 
pipe.hset('login:'; token, user) 
pipe.zadd('recent:', token, timestamp) 


if item: 
pipe.zadd('viewed:' 4 token, item, timestamp) 
pipe. zremrangebvrank ('viewed:' + token, 0, -26) и ит yy; 
pipe-zinerbv('viewed:', item, -1) او ا‎ 
pipe.execute() RME o 


1 1 


D00000Redis00000000000000000000000000000205000 
update token ріре1їіпе ( ) П000000000001020000000000000 
О00000%ебо0000000ирдае token pipeline( ) 000000000 
О00000%еБп000000005000100000000000000 
update token pipeline( ) П0000000000000000000000000 


О000000000000ирааќе +океп ( ) 000 
update token pipeline( ) ППОДОДО0О0000000000000000000 
0UU000000000000000000000000Redis00000000000000004-900 
UUU000U000000000000000000000update єокеп()0000 
update token_plpeLine()D0000000UUUUUUUUU0000DD 


00004-9 benchmark update ТоКеп()| 


def benchmark update token(conn, duration): шақы У 
for function in (update token, update token pipeline): 4 测试 会 分 别 执行 


设置 计数 器 以 count = 0 update token () PÑ 

及 测试 结束 的 start = time.time() 数 和 update token. 

条 件 。 end = start + duration pipeline() 两 数 。 
while time.time() < end: 

Count += 1 рата дом 
调用 两 个 > function(conn, 'token', 'user', 'item') 计算 函数 的 执行 
函数 的 其 delta = time.time() - start == 时 长 。 

中 一 个 print function. пате , count, delta, count / delta < м 
No | 打印 测试 结果 。 


04-40000000000000000000000000000000000 


04-4 ПООООООООД0000000000000000000000000000000000000/008 ей 0000000 
ОДООО00000000000000000000000 


0000 0000 
update table() update_table_ 
000 pipeline() 000 
sa мере је 
0.015ms | 3 761 6 394 
Папдари 











00000000 

001660 0.015т5 | З 257 5 991 
ПП 
00000000 

1Gb 0.271ms | 739 2 841 
000 


00000000 
МРМОО 





1.8Mb 
48ms 3.67 18.2 
ОтедаріїП 


О0004-Ф000000000000000000000000000000000500000000 
ОООД000000040000000000000000000000000РУспопООООДОГО 
Кеа ППОООДО0000000000004.600000000000000 


ОО00000000000000000000000000000Аеаіѕ 000000000000 
Дробро00000Веаї р000О5сапаага 0000 


D000ePUBw.COMUNUUUePUBw.COM (00000 
ОО0000000000 


4.6 ПОООО000000 


О0000000000000000АеаіѕП000000006еаіѕП000000000000 
QOD0000000000Redis0000000000000000000000000000000000 
QOD000000000Redis00000000000000000000000000000000000 
ОДООО00000000000000000000 


О0Аеаіѕ0000000000000000000000Аеаіѕ=00000000000000 
Дрр0веаї 00000000 геа 15 - бепсћта гк000000004-100000000 
О0000000000000000000геаіѕ - репсһта гкК000Аеаіѕ$ 00000000 
ПО00000 


00004-10 000000002002.4 ен2оо000000000геаїз - 


benchmark 


5 redis-benchmark -с 1 -q < 一 给 定 '-a' 选 项 可 以 计 程 序 简 
PING (inline): 34246.57 requests per second 化 输出 和 结果， 给 定 '-ce 1' 选 
PING: 34843.21 requests per second 项 让 程序 只 使 用 一 个 客户 端 


MSET (10 keys): 24213.08 requests per second 
SET: 32467.53 requests per second 

СЕТ: 33112.59 requests per second 

INCR: 32679.74 requests per second 

LPUSH: 33333.33 requests рег second 

LPOP: 33670.04 requests per second 

SADD: 33222.59 requests per second 

SPOP: 34482.76 requests per second 

LPUSH (again, in order to bench LRANGE): 33222.59 requests per second 
LRANGE (first 100 elements): 22988.51 requests per second 

LRANGE (first 300 elements): 13888.89 requests per second 

LRANGE (first 450 elements): 11061.95 requests рег second 

LRANGE (first 600 elements): 9041.59 requests per second 


来 进行 测试 。 


геді5- репсһтагкЦу0000000000кеаіѕ0001000000000000 
FEEDER redis-benchmarkijii0redis-benchmarkrijii 
05000000000000000000Огеаї 15 - benchma гкОООООООД00О00000 
П00геаіѕ - репсһта гко0000000000000000000000 


О00геаіѕ - репсһта гко00000000000000000000000000000 
О00геаіѕ - репсһта гко00000000000000000000000000000000 
ОООО00000000000000000000000 redis -репсћта гК000000000 
О00000000000000РуєһопрО00000000гедіѕ - репсһта гкО0000 
50%160%1 


00000000000000000000 redis - бепсћта г КО0000259П 
З096ПДОДОДО0000"Саппої assign requested address” 0000000 
LILILLLILILLLULILLILILLIULLILILLLLLIULILILLILLILUI 


04-5000000000000 redis - репсһта гКкОРУЕПОПОДОООООООО 
ОДООО000000000000000000000000 


04-5 ПООВебіїв 000000000000 гед 15 -репсћта гКОООООДОООООООО000000000000 
000000 


000000 00000 0000 














0000000000 redis - репсптагк050960609 | 00000000000000 


000000 00000 0000 


ООО00000000000 | 00000 
Кеа! 5 





UUUUUUUUUUredis -репсћта гк025%[30% 


О0000000"Саппої assign requested 00000000000000 | 00000 
address” 00000000000 Кеа! 500 








О004-5000000000000000000000000000000000000000000 
О0000000000000000000000000000Аеаіѕ$П0000000000000000 
О0000000000004-50000000000000000000001.400000000000 
00 


UUURedisUUUUUUUUUUUUUUUUUUUconnection роо!ППП 
PythonURedisUUUUUUUUUURedisUUUUUUUUUUUDUD 
гед15. Кед 15 ( ) ПОДОДОО0000000000000000000000000000000 
UUU00000000000000RedisUUUUUUUUUU0U000000000000000000 
РуУЄпопПДООООООДО00О0000000000000000 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


4.7 ПП 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUU 


ОДООД0000000000000000000А0Р00О000000000000000000 
ОДООД00000000000000МАТЄНОМОИЇ ТІПЕХЕСОДОООД000000 


ОООООМАТ СНОМО  ТІДЕХЕСУДОООДООДОДООДООООООВеаї5О000 
О00600000000000000000000000000000500000000000Аеаіѕр 
UUUUUUUUUUU 


© D0000000000000000000000000000000000Unix0Q0Unix000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUU 


2 AcID0OUUUUUatomicityUUUUUUconsistencyDUUUUUUisolationD] 
QOD00durabilitygO000000000000000000000000000ACIDOO0 


Э ДОДООВОДООДОО00000000000000000000000000080000000 
ОДООД000000000000008000000000000000 


D000ePUBw.COMDNHUUUePUBw.COM 0000 
О000000000000 


050 дВеаіє 00000 


000000 


e Пркеа 5 ПП 

e Ддвеаїб роророродорО 
• ОДПІРООООДО0000 

• 00000000 


О0500000000000006еаіѕ$000000000000000000000000 
Кеаіѕ$О0О0000000000000000000000000000000000000000000 
О0000006еаіѕП00000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
ПОООО00000000000000—==00000000сотропеп 0000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUU 


D000ePUBw.COMDUUUUePUBw.COM ПОД 
UUUUUUUUUUUUU 


5.1 (jjRedisi ППП 


ОДОООО000000000000000000000000000000000000000000 
ОДОООООО00000000000000000000000000000----0000000000 


ULHnuxUUnixUUUUUUUUUUUUUUUUUU0U000000000000000000 
О0000000000000000000000000000000000000000000Аеаіѕ00 
ОДООООО000000000000000000000000000000000000000000000 
ООО00000000000Ого!і па ОДООО00000000000000000000000000 
ОДОО00000000 


зу5Іод ОПОООД0О0000000000000000000Ціпохр000піхо 00 
05140ТСРОДОУОРДОДООзузІодОДОООДОДОО0О00000000000 
ОгоиеПОО000000000000000000005уѕІоПО000000000000000 
0005уѕІо9ПООО000000000000000000000000000000000000000 
005у5Іо9П00000005у51о9000000000000000000 


ПОзуз!од ЦООООСООООООООООООООООООООООО0000000 
ѕуѕІо9ПОО00000А5У51одаП0005у5109 - пд ОДОДО00000 
Кѕуѕ109915у5109-поП00005у5 tog - п900000000000000000 
ОООО00000000000000000000000000000005У5Іо9000000000 


Кеа ППОДОДОДОДО0О0О00000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000 


зузІодОПОООО0000000000000000000000000000000000000 
О0000000000000000000000000006еаіѕ00000000000000те- 
sensitive log ПДОДОО0000000000000005у5090000000000000 
000000000000000гесепі log теѕѕадеП0 


5.1.1 ППО 


ОДООООО00000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
D000000000000000000000000Redis0000000000000000000000 
ОДОО00000000 


00005-10109 гесеп' () ОДОДОООО000000Веаї  ОДО0000000 
ПО000000000000000РОЅНОО0000000000000000000000000000 
ПО0000000000ЕКАМЕПООВ000000000000РОЅНППО00000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


00005-1 log гесепї() 


SEVERITY = | 
logging.DEBUG: 'debug', i š 将 大 
ogging чо 设置 一 个 字典 ， 将 大 部 分 


logging.INFO: 'info', 


logging.WARNTNG: 'warning', 日 志 的 安全 级 别 映射 为 字 

logging.ERROR: 'error', 符 串 。 келен Бүтін 

logging.CRITICAL: 'critical', 尝试 将 日 志 的 安 
) 全 级 别 转 换 为 简 
SEVERITY.update((name, name) for name іп SEVERITY.values()) 单 的 字符 串 。 





def log recent(conn, name, message, severitv-logging.INFO, pipe-None): 





将 当前 severity = str (SEVERITY.get (severity, severity)) .lower () « 

ы destination = 'кесепЕ:%8:%8'%(пате, severity) а ТІ 1 
加 到 消 p message = time.asctime() 4 ' ' + message 使 用 流水 线 来 将 通信 往 
ріре = ріре or сопп.ріреїіпе() <— 返 次 数 降 低 为 一 次 。 7% 

息 里 面 ， pipe.lpush(destination, message) < 消息 
用 于 记 pipe.ltrim(destination, 0, 99) 4 дузі, 

КЕЛ . 4 f Š + і УН. š 
录 消 息 pipe .execute () 4— ненна 将 消息 添加 到 口 志 列 
маза 执行 两 个 命令 。 让 它 只 包含 最 新 的 。 | 表 的 最 前 面 。 
时 间 。 100 条 消息 。 


ОООО00000000000000003 n folldebug 000000 
log гесеп'і ( ) ОП0000000----О000000-РО5НОДООІ ТВІМОДОДОП 
ОДООООД0000000000000000000000000000000000000000000 


5.1.2 ПОД 


О0000000109, гесеп' ( ) ООДОДОДОДО00000109 гесепі ( )0 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
000000 


00005-20109 common( ) В0О00000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДО0000000 


00005-2 109 соттоп () 0 


def log соттоп (conn, name, message, severity=logging. INFO, timeout=5): 


p severity = str(SEVERITV.get (severity, severitv)) ..lower() 
设置 口 志 的 destination = 'соптоп:56:58'5 (name, severity) а | 负责 存储 近期 的 党 
安全 级 别 。 start key = destination + ':start' | 见 日 志 消 息 的 键 。 
pipe = conn.pipeline() | ды 
end з time.time() + timeout | 因为 程序 每 小 时 需要 轮换 一 
while time.time() < end: | 次 日 志 ， 所 以 它 使 用 一 个 键 
вер 来 记录 当前 所 处 的 小 时 数 。 
对 记录 当前 | > pipe.watch(start Кеу) 取得 当前 时 间 。 
记录 当前 now = datetime.utenow() .timetuple í) < | 取得 当前 所 处 的 
小 时 数 的 键 hour start = dazetime(tnowl:4)) .isoformat() < | 时 数 ġidi 
2% |М 
чне ПІР о 
进行 监视 ， 确 existing = pipe.get (start Кеу) 创建 一 个 事务 。 
保 轮 换 操 作 pipe.multi() 4— Í 
可 以 正确 地 if existing and existing < hcur_start: < 一 如 果 这 个 常见 
pe ipe.rename (destination, destination 4 ':last') Ey A = 
执行 。 | б зни нон 4 š 志 消 息 列 表 
pipe.rename (start_key, destination + ':pstart') 记录 的 是 上 一 
pipe.set (start key, hour start) з за 
N 那么 将 这 些 旧 的 常见 elif not existing: 个 小 时 的 日 
日 志 消 息 归 档 。 pipe.set(start kev, hour start) мене 
pipe.zinerbv (destination, message) 过 изн: 
> 104 recent(pipe, name, message, severitv, pipe) 更 新 当前 所 
return 处 的 小 时 数 。 


log recent() В 
数 负 责 记录 日 志 并 调 
Н execute () БАЖ. 


ЕСТУ 5. 
正在 执行 归档 操作 而 出 现 | аниме 

KURAR, MAMET, 
ОДОДОДОБОДбОО0О000000000000000000000000000000000 
ОДОДОООДМАТ НИМИ ТІ/ЕХЕСОПОООООДОДОДОДОДОДОДОДОДОДО 
О00000000000000000000000000000000000000109_гесепї ( ) 


О00000000000000000000000000КАеаіѕ$=0000000000000 


О00000000000000000000000000000000Аеаіѕ$П000000000 
О000000000Аеаіѕ 00000 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


5.2 ПДООО0000 


ОО0200000000000000000000000000000000000000000000 
Ор2г0р0000000000000000000000000000000000000000000000 
О0000 


О0000000000500000010 0000000000000005000002000000 
бООДОДбО00000000000000000000000000000000000000000 
ОДОДООО00000000000000000000000 


Дб000000000квеаїз рд0000000000кеаї  ДоОДОО0000000000 
ООО0О0000000000000000000000000000000000000000000000 
URedisUUUUUUU0UUUUtime series соипіегоПОДОДОО0000000000 
ОДО0000000 


5.2.1  ПЛОДОПООВеаї5 00 


ОДООООО00О000000000000000000000000000000000000000 
ОДОДООО0000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО0000000000000000000 


ОДБООО0О000000000000000000000000000000000000000000 
ОДООООО00000000000000800О0Д/9000000 ОО00000000000000000 
000000000000000100500100000000012000000000000000000 
ОДООО000000000000 


UU000000000000000000000000000000000000UUUUURedis 
0000 


1000000000 


ОДООООО0ОДОД00000000000000000000000000000000030// 
HHS00000000000000000003500000time зисепрооооооооооооо 
ООДОО0000000000000000000000000000000000000005-10000 
ООДОД00000000000000000000500000000000000000 


count:5:hits ——ə — hash 


1336376410 | 

1336376405 | 这 个 计数 器 显 示 网 站 
1336376395 | 在 2012 年 5 月 7 日 早晨 
| 7:39:55 217 :40:00 58 
共 获 得 了 17 次 点 击 。 


1336376400 | 





05-1 00000002012050700070400000000005000000000000 





ОДООО0О000000000000000000000000000000000000000000 
ОДОДО0000200/ ordered зедчепседрорОО0000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
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known: —— À o 25е! 


1:hits ' 0 ЕЕ je ma 
ваља 1б 当 有 序 集合 中 的 分 值 都 相等 时 ， 


Redis 将 根据 成 员 名 来 进行 排序 。 


боли 0 
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00005-3 update counter()iii) 


ШР МУШЕЛ, 分 别 为 1 秒 、5 ЖР 1281. 5 分 钟 、 


通过 取得 当前 时 1 小 时 、$ 小 时 、1 天 一 一 用 户 可 以 按 需 调整 这 些 精 虚 。 为 了 保证 之 后 的 
间 来 判断 应 该 对 PRECISION = (1, 5, 60, 300, 3600, 18000, 86400) 4 清理 工作 可 以 正 
哪个 时 间 片 执行 gee u 确 地 执行 ， 这 里 
pdate соцпіеү (conn, name, count-1, now=None): 

日 增 操作 。 — now = now or time.time() 需要 创建 一 个 事 
为 我 们 记录 的 每 pipe = conn.pipeline() < 务 型 流水 线 。 

й p> for prec in PRECISION: 2 Beut z 
种 精度 都 创建 一 prec іп PRECTSION: < pree < | 取得 当前 时 间 片 的 开始 时 间 。 
个 计数 器 。 hash = '%8:%5'%(ркес, name) <— aà 
将 计数 器 的 引用 信 г> pipe.zadd('known:', hash, 0) 创建 负责 存 
НЕ ЛЕ Ж ~ pipe.hincrbv('count:' + hash, pnow, count) < 储 计 数 信息 
里 面 , 并 将 其 分 值 设 она 对 给 定名 字 和 精度 的 计数 器 进 。 “的 散 列 。 
置 为 0， 以 便 在 之 后 行 更 新 。 
执行 清理 操作 。 


ООДОО00000000000000000000000002А400000НІ1МСАВУДОДО 
ОДОООО0000000000000000000000000000000000000005-40000 
ОО00000000000000096ЕТАСЕПОО000000000000000000000000 
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00005-4 get counter()[0 





def get_counter (conn, name, precision): | 从 Redis 里 而 取出 计 

та вії = '$s:$s'$( ision, t 
取得 存储 计数 > hash s:%s precision, name) | 数 器 数据 。 

data = conn.hgetall('count:' + hash) 1 
аш нл “ПШ 将 计数 器 数据 转换 成 
名 字 。 for key, value іп data.iteritems(): У 

to return.append((int(kev), int(value))) 指定 的 格式 。 
to return.sort() 
return to return | 对 数据 进行 排序 ， 把 吕 
的 数据 样本 排 在 前 面 。 


get_counter ) П0000000000000000000000000000000000 
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ОДОДООО0000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
RedisU0000000000000000 


ППППргосе55ПППППс!еап upUUUUUUUUUUUUUUUUU0U0000000 
UUUUUUUUU 
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e ООДОДООДО000000000000000000000000000000000000 
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ООД000000000000000000000000020000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
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00005-5 clean counters(jili 














持续 地 对 计数 器 def clean counters (conn) : 为 了 平等 地 处 理 更 新 频率 各 不 相同 的 多 个 计 
进行 清理 , HANE + ба кара а. анан учар. 数 器 ， 程 序 需要 记录 清理 操作 执行 的 次 数 。 
мы тт ее time.time() 记录 清理 操作 开始 执行 的 
а кй 时 间 ， 这 个 值 将 被 用 于 计算 
index = 0 
渐进 地 遍历 所 有 已 知 的 计数 器 。 | while index c conn.zcard('known:'): 清理 操作 的 执行 时 长 。 
|| hash = conn.zrange('known:', index, index) <- 
因为 清理 程序 每 60 秒 就 会 循环 index += 1 тен 
—#, 所 以 这 里 需要 根据 计数 器 if <>“ 取得 被 检查 计数 器 的 数据 。 
的 更 新 频率 来 判断 是 否 真 的 有 h ћ="ћ ћ[0] У 
必要 对 计数 器 进行 清理 。 кет ш e (hash.partition(':')(0)) — жаки. 
如 果 这 个 计数 器 在 这 次 循环 里 l-o bprec = int (prec // 60) ог 1 
不 需要 进行 清理 , 那么 检查 下 一 г> if passes $ bprec: 
个 计数 器 。( 举 个 例子 , 如 果 清 конне 获取 样本 的 开始 时 间 ， 并 将 其 
理 程序 只 循环 了 3 次 ,而 计数 器 hkey = 'count:' + hash ЭРНИ, 
的 更 新 频率 为 每 5 分 钟 一 次 , 那 г> cutoff = time.time() - SAMPLE COUNT 4 prec 
么 程序 暂时 还 不 需要 对 这 个 计 samples = map(int, conn.hkevs (hkev)) 
ж samples. sort () 
数 器 进行 清理 。 ) š remove = bisect.bisect_right (samples, cutoff) l- 
و‎ le ا‎ 计算 出 需要 移 除 的 样本 数量 
і if remove: 1 о 
т... 4 conn.hdel (hkey, tsamplesl:removel) 
P if remove == len(samples): «319 这 个 散 列 可 能 已 
按 需 移 除 计数 样本 га 经 被 清空 。 
сі о pipe.watch (hkev) | 
б қ if not pipe.hlen(hkey): 
在 尝试 修改 计数 器 散 列 f pipe.multi() 
之 前 ， 对 其 进行 监视 。 pipe.zrem('known:', hash) 
验证 计数 器 散 列 是 否 为 室 ， 如 果 是 的 话 ， 那 pipe.execute () š 
， 一 他 
么 从 记录 已 知 计数 器 的 有 序 集合 里 面 移 除 它 。 Рика $ нання 
计数 器 散 列 并 不 为 空 ， 继 续 让 它 留 在 记录 已 知 计数 器 | 
一 pipe.unwatch() 与 本 次 循环 相同 的 索引 。 
的 有 序 集 合 里 面 。 except redis.exceptions.WatchError: 
有 其 他 程序 向 这 个 计算 器 散 列 添 pass 
加 了 新 的 数据 ， 它 已 经 不 再 是 空 passes += 1 
的 了 ， 继 续 让 它 留 在 记录 已 知 计 duration = min (int (time.time() - start) + 1, 60) |- 
АЕН Š time.sleep (тах (60 - duration, 1)) < ii 
анааан ж Жейн 为 了 让 清理 操作 的 执 


如 果 这 次 循环 未 耗 尽 60 Ж, 那么 在 余下 的 时 |” 行 频率 与 计数 器 更 新 

间 内 进行 休眠 ; 如 果 60 BEARER, 那么 休 | ”的 频率 保持 一 致 ， 对 

IR 1 秒 以 便 稍 作 休息 。 记录 循环 次 数 的 变量 
以 及 记录 执行 时 长 的 
变量 进行 更 新 。 
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5.2.2 ПуВеаїв Пий 


О00000000000000000000АеаіѕВО00000000500000000000 
ООО0000500000000000000000000000000 


О00000000000000000000005.1.200000109__ соттоп ( ) ПОП 
П-ШІ 


ОДООДООО000000000000000000000000000000000000 


ОД000000000Осопеехе ПОООООДОДОО0000000000000000000 
О0000тіћО00000тахО000000сочпО00005ито0000000 
UsumsqUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUMINUMAX 
ООО000000000000005-ЗО0000000000000000000000 
РгоТіТеРадеПОПОДОДОДОООАссез 5 Тітеррр0000000 


stats:ProfilePage:Accesslime — P zset 
' 0.035 


4.958 
194.268 


‚ 258.973 
2323 
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ОДОООО000000000000000000000000000000000000000000 
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ОДООООО000000000000000000000000000000000000000 
ZUNIONS ТОКЕОООООДОДОООООМІМОМАХОДОДОООООДООО00000000 
ООД00000000000000020М10М5ТОКЕПООДООООООДООООД00000000 
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00005-6 update stats()il 


def update stats(conn, context, type, value, timeout-5): 


负责 存储 统计 








destination = 'stats:$s:3s'$(context, type) 数据 的 键 。 
start kev = destination + ':start' < 
“s нен Ж f common 104() 
end = time.timel) + timecu 
while time.timel) < end: 两 数 FF, Д 
try: 前 这 一 个 小 时 的 
pipe.watch(start_key) 数据 和 上 一 个 小 
now = datetime.utcnow() ..timstuple() 时 的 数据 。 
hcur_start = datetime(tnewl:4)) .isoformat () 
existing = pipe.cet (start_key) 
pipe.multi() 
if existing and existing « hour start: 
pipe.rename (destination, destination 4 ':last') 
pipe.rename (start kev, destination 4 ':pstazt') 
pipe.set (start kev, hour start) 
схеуј = str(uuid.uuid4 ()) 
txey2 з str(uuid.uuidd()) 
pipe.zadd(tkevi, 'min', value) 将 值 添加 到 临时 键 里 而 
pipe.2add (tkey2, 'max', value) ЕЛП ` ІП» 
„мел. fiex, A 
sti ion, У11, ate-'mi 
2 - = > h, ` В 
pipe.zunionstore (destination, 存储 统计 数据 的 键 以 及 两 个 临时 
Яя Еее (destination, ЕКеу2], асакесаве='тах') 键 进行 并 集 计 算 。 
本 数量 、 (НЕ, pipe.delete(tkevi, tkevz) ТАЛЫ. 
值 的 平方 之 和 3 个 pipe.zincrbv(destination, 'count') | 删除 临时 键 。 
成 员 进 行 更 新 。 pipe.zincrbv (destination, 'sum', value) 
pipe.zincrbv (destination, 'sumsc', valuetvalue) 


return pipe.execute() l-3:) 
except redis.exceptions .WatchError: 
continue 


"1 返回 基本 的 计数 信息 ， 
以 重 丽 数 调用 者 在 有 需 
要 时 做 进一步 的 处 理 。 


W—4 


如 果 新 的 一 个 小 时 已 经 开始 ， 
并 且 旧 的 数据 已 经 被 归档 , 那 
么 进行 重 试 。 


update 5 аїиз ( ) ППООО00000000000000000005.1.20000 
ОТод common( ) ОДДООО000000000000Оирдате ѕ+а+иѕ ( ) 0000 
ОДООООО000000000000000000000000000000000000000000000 
ПО0000000000000000020410М5ТОАЕООО000000000000000000 
ОДОО0000000000000000000Пираате status ( ) 000000000000 
ОДОООО00000000000000000000000000000 


00005 "ООО0000000000000000000000000000000000000 
ОДОООО00000000000000000000005ипр000000О соб п'ЄО000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООО000000000000000 


00005-7 деї ѕ+а+иѕ () 0 


程序 将 从 这 个 键 里 面 
def get stats(conn, context, буре): 取出 统计 数据 。 
ey = 'stats:%s:%s' % (context, type) < НЕ ЈЕ ж 
HAF data = dict (conn.zrange (кеу, 0, -1, withscores=True)) s — 获取 基本 的 统 
讨 数据 ,并 将 它 


ЖИН. > datal'average'l = data['sum'] / datal'count') 
> numerator = data['sumsq'] - data['sum'] ** 2 / data[:'count'] TIERA — 4 
data['stddev'] = (numerator / (data['count'] - 1 ог 1)) ** .5 字典 里 面 。 
return data 
| 
| 计算 标准 差 的 第 一 个 步 又。 


UUUU000UUU0U0U0UUUget_stats()UUUUUUUUUU000UUU000UUU 
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UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


5.2.3 ППОООО000000 
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00 


ОООО00000000000000ОРУСОПОДОДОГОСОПіехі manager 
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ОДООООО000000000000000000000000000000000000000000000 
UUU0URedisUUUUUUUUUUUUUUUUUUUUUUU00U0U0000000000 


00005-8 access Тлте()000000 











记录 代码 块 执 @contextlib. contextmanager f < 将 这 个 Python 生成 器 用 作 
рен 2 | def access time(conn, context): 上 下 文 管理 器 。 
行 前 的 时 间 。 > start = time.time() 
> prela 计算 代码 块 的 执行 时 长 : 
зада о 
са delta = time.time() - start а 
== > stats = update_stats(conn, context, 'AccessTime', delta) 
更 新 这 一 上 下 文 的 average = stats[1] / stats [0] б 计算 页 面 的 平均 
统计 数据 。 pipe = conn.pipeline (True) 访问 时 长 。 
ти п pipe.zadd('slowest:AccessTime', context, average) 
将 页 面 的 平均 访问 时 长 pipe.zremrangebyrank ('slowest :AccessTime', 0, -101) 
ІҢ слідів» іре. 
ыш pipe, sxecutet] AccessTime AĦĦAR 
H FESE, “а 4 
à 会 保留 最 慢 的 100 条 记录 。 


UDaccess_time()0OO0000000000000000000000000000000 
D0O000000000000000000000000000000000UDaccess_time() 吕 
QOD0000WebO000000000000000000000000000000000200000 
О00000000000000000 


аа 这 个 视图 (view) 接受 -个 
KREMA Redis 连接 以 及 一 个 生成 内 


7 K, gis: >i |. зве 
сог def process уіем (сопп, callback): «оо 容 的 回调 函数 为 参数 。 
这 样 包围 代码 所 的 。 L p> with access_time(conn, request.path): 


return callback () < 当 上 下 文 管理 器 中 的 yield 
语句 被 执行 时 ， 这 个 语句 就 
会 被 执行 。 
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000000000гесеп' 109 () ОО000000000 
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ОО0000000000 


5.3 ППРОООООООЦ 
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UUU00000RedisUUUUUUUUUUUUUUIPOUUUUUUUUUURedisUUUIPD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUU000000000000000000000000000000iocal lookup tableD00 
ОТРОДОДОООД0ІРООООООДОООО000000000000Веаї 0000000000 
ОДО0000000 


5.3.1 ПООООО 


UUUUIPOUUUUUUUUUUUDU 
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0000000000000000000000000GeotiteCity-Blocks.csvDDD0000 
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ІООО000000/00/000000000000000000000000000 


ООІРОО0000000000000000000000000001РО00001РО00000 
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ПОІРОО000001РОО0000000000000000000000000100000000 
ОО01РО0О0000000000001РОО0001РО0000000000000000001РО00 
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О000000000000001000001РОО000080000000000 


00005-9 ip to 5соге() | 


def ip to score (ip address): 


score = 0 
for у си ip-address,eplitċ.51)s 
score = score х 256 + int(v, 10) 


return score 


UUIFOUUUUUUUUUUUUUUUUUUIFOUUUUIPUUUUUUUUUUUIPUUODU 
UUUUUUUUUUUUIDUUUUUUUUUUUUIPUUUUUUU ОПОДООО0000000010 
О000000000000000000010000005-1000000000001РО0000Ірр0 
О0000 


00009-10 import ips to геді5()ПЛ 


def import ips to redis(conn, filename): < 这 个 函数 在 执行 时 需要 输入 
csv_file = csv.reader(open(filename, 'rb')) GeoLiteCity-Blocks сву 文件 
for count, гом in enumerate(ecsv file): > 
start ір = row[0] if row else '' 所 在 的 路 径 。 
iż ЗА in start ip.doweżije 


if b tħ аш ip: 按 需 将 IP 地 址 
start ір з ip to score(start ip) 转换 为 分 值 。 
elif start_ip.isdigit(): 
быны = int(start_ip, 10) 略 过 文件 的 第 一 行 以 
了 及 格式 不 正确 的 条 目 。 
citv іа = row[2] + '_' + str(count) 
conn.zadd('ip2citvid:', city id, start ір) 4-3 构建 唯一 城市 ID。 
将 城市 ID 及 其 对 应 的 人 P 地 址 
分 值 添加 到 有 序 集合 里 面 。 


UUUimport_ ips to_redls()UUUUUUIPUOUUUURedisUUUUUUU 
00005-11000000000000001900000000000000000000000000 
О0000000000000000000000000000Ј50 000000000 


00009-11 import cities to геаіѕ() 0 





def import cities to redis(conn, filename): < 这 个 函数 在 执行 时 需要 输入 
for мови Маре ара је (ореп ganeg: Z тр! й; $ GeoLiteCitv-Location.csv 文件 
T en(row) < 4 or not rowlol.isdigit(): ۴ 
continue 所 在 的 路 径 。 
row = li.decode('latin-1') for і іп row] 
clty id = row[0] 
country = row[1] 准备 好 需要 添加 到 散 列 
region = row[2] 里 面 的 信息 。 
citv = rowl3l 
conn.hset ('citvid2zcitv:', citv id, 将 城市 信息 添加 
json.dumps ( [city, region, country])) 到 Redis 里 面 。 


UU0000000000RedisUUUUUUUU000000000UIPUUUUUUDUD 


5.3.2 ППІРОООГ 


UUUUIFPUUUUUUUUUUUUUUUUUUUUUUIPUUIFPUUOOUDUDU 
UbeginningU00000000000000000000UIPOU000U000000000000 
ір +о ѕсоге( ) ППООООІРООООООООО00000000000001РО001РО0 
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00009-12 find citv бу 1ір() 00 





def find city ру ір(сопп, ір address): урн 
if isinstance(ip address, str): 将 ІР 地 址 转换 为 分 值 以 使 执行 
ip address = ip to score (ip address) ZREVRANGEBXSCORE 命令 。 
citv іа = conn.zrevrangebvscore( š У š 
"ір2сісуід:!, ip address, 0, start=0, num=1) 查找 唯一 城市 1D。 
if not citv id: қ са. 3 
return None 将 唯 城市 ID 转换 为 
普通 城市 ID。 
сісу id = citv idlo).partition(' ') [0] 
return json.loads (conn. hget ('citvidżcitv:', city id)) 
= 从 散 列 里 面 取 出 
城市 信息 。 


QDfind_city_by_1ip()0DO000000000iPO000000000000000 
UUUUUUUUUUUUUUU 00000000000000000007000000000000000 
ООДОО0ОО00000000000 7 00000000000000000000000000000000 
UURedisUUUUUUUUUUUUUUUUUserviceDD 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


5.4 UUUUUUUU 


D00000000000Redis00000000000000000000000000000000 
UUURedisUUUUUUUUUUUUUUUUWebD0U00000UUUUUUUUUUUUUUUDUD 
D0000000000000000Redis0Q00000000000000000000RedisQ0000 
ОДООООО00000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 
ОДОД0О0000000000000000000000Веаї ПООООООООО00000000 
000000 


ОДОДОДО000000000000/ме сопійдигаєїіопОДОДО0000000 
Кеаіѕ00000000 


5.4.1 Ггу)Веаї ПИ 


ОДООД0000000000000000000000000000----О0000000000 
Др аадо00м/е боророродоороророророборорорророробоб 
ОДООО000000000000"000000000000000007000000000000000 
ОДОООО0000000000000000000 


ОООО000000000000000000000000000000000000УУеБО0 
ОДООООО000000000000000000000000000000 


UU00000000000000000000000000000000RedisU00000000 
UUUURedisUUUUUUUUUUUUUUUUUUUUUUU0U000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU2UUUUUUD 
0000000000000000000000 + 5_ипдег_талпТепапсе () 0000 
T гие ПДООДОДОО000000000000015 under maintenance ) 0000 
Ра 5ерПОДООО000000000000015 under maintenance ( ) 00000 
0000015 -ипдег-таіпепапсео0000000000000000015 - 
under-maintenancef IODDLOODDOOT гчеддрОДРат5 ерд00000000 
О000000000000000000000000000000Аеаіѕ$ра00000%еБпр000 
00015 under таіп+епапсе ( ) П000000000000000000000005- 
13100015 under maintenance ( ) 00000000 


00009-13 is under таіп+епапсе ( ) П0 


LAST CHECKED = None 





ун AE Блу E SEY 
IS UNDER MAINTENANCE = False 将 两 变量 设置 为 全 局 变量 以 便 
| | | 在 之 后 对 它们 进行 写 入 。 
距离 上 次 检查 是 否 def is under maintenance (conn) : 
已 经 超过 1 #b? global LAST CHECKED, IS UNDER MAINTENANCE 4— 
if LAST CHECKED « time.time() - 1: 
LAST CHECKED = time.time() < 更 新 最 后 检 
IS UNDER MAINTENANCE = bool ( 查 时 间 。 
—b conn.get ('is-under-maintenance')) HM 
检查 系统 是 个 return IS UNDER MAINTENANCE < 返回 一 个 布尔 值 ， 用 于 表 
= ` ETE 1 — = 一 
ака 示 系统 是 否 正在 进行 维护 。 








000і5 under таіпіепапсе ( ) 0000р!ічо іпёо0000000000 
ОДОО000100000000УУеБООДООООООО00Веаь ррорормер 0000 
00015 under maintenance ( ) П000000000000000000000000 
ООО00000000000000000000000000000000000000000000000 
is under maintenance ( ) ППОООДООООДОО00О0000000000000 
О0000000соттоп!у accessible ІосаєїоПОДОДОДОО0000000000 
О0000000000000Аеаіѕ0000 


5.4.2 ПДДО00000000000Веаїв ПП 


D000000000Redis0000000000000000000000000000000 
Кеа ППОДОДОДОДО0О0О00000000000000000000000000000000 
UU0000000000000000RedisUUUUUUU000000000000000000 
Кеа! 5 0000 


ОДООООО00р000000000000000000000000000000000000 
Кеа ППОДОДОДОО0О0О00000000000000000000000000000000 
ILLI cookies ДДОООО0000000000Кеаї  ООДОООООО000000000 
D00000000000000000Redis000000000*000”0000000000000000 
О00000000000000000000000000кеу зраседпобоб0000000000 
ОООД00000000000000000000В8еаїз рр000000Кеаї  ДДО000000 
Дрр00кеаї о орборороброробородорробоо0 


Обр00000000Веаї ПООООООООООО000000000000000000000 
ОООД0000000000000000000008еаїздррд000веаї ороро000000 
О0000000000000006еаіѕП00000000000000000000000000000 
00000000000000000Redis00000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О000000000000000000000000000000000000000Аеаіѕ= 000000 
ILU 


ООО0000000000000000000000/50 МО000000000000000000 
О0000000000000000000000000000000000000000кеаіѕ$00000 
О0000000О0О0О0Осоп 119 : redis : Та 15 125000000005-140 
set соп#19( ) П000000000000000 


00009-14 set соп#19() 00 


def set config(conn, буре, component, config): 
conn.set( 
'config:%s:%s'% (type, component), 
json. dumps (config) ) 
UUUUset_config ( ) ПОООО0000000000050МО000000000 
get соп?1д( ) П0000000015= under maintenance () 0000000 
О0000000000000000000009е+_соп#і1о ( ) 00000 
is under maintenance ( ) В08000005-150000$еї config ( ) Ull 


ОДдеє config( ) ПОООО00000000000000000000001000100000 
OOU 


00005-15 get_config()[|[] 


CONFIGS = (|) 





if CHECKED.get (key) < time.time() - wait: <— 
CHECKED [key] = time.time() 


CHECKED = () | 

Ри Жы й 检查 是 否 需 要 对 

e l NES ef get_config (conn, type, component, wait=1): EA Î гүз 
有 和 需要 对 配置 进行 更 key = 'сопіїід:58:55'5 (Буре, component) 信 алі 
新 ， 记 录 最 后 一 次 检 并 县 进行 更 新 。 


查 这 个 连接 的 时 间 。 
config = json.loads(conn.get (key) ог '()') 


将 潜在 的 Unicode 关 键 一 > config = dict((str(k), сопЕја(кј) for Кк іп config) 
Ж 





字 人 参数 转换 为 字符 串 > old config = CONFIGS.get (key) 取得 Redis 存 人 
关键 字 参 数 。 if config l- old config: 组 件 配置 。 
取得 组 件 正 在 使 Rd 1 如 果 两 个 配置 并 
用 的 配置 。 return CONFIGS .get (key) 不 相同 …… 
…… 那 么 对 组 件 的 配 
置 进行 更 新 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUU00000000000000000000RedisUUUU0000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОДООД000000000000000 


5.4.3 ПуВеаїв [1 


Орр0000Веаї  ПООООО000000000000000000000000000000 
ОДОД000000000000000000000000000000000В8еаї 00000000 
ОООО0000000000000000000000000дФесогасог ДООООО0000000 
Дрррровеаїь 0000 


ППП РуёһопО00000000000Х00000000Ү00000000Ұ00000 
ОБОДООД00000000000ХОД000000000000000000000000000000 
ОДООО0000000000000000000----П000000000000 


00005-160000000000000000000000000000000000 
UwrapperUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
Кеаіѕ0П000000Аеаі$ПО00000000000000000000000000000000 
00 


00005-16 redis соппес+іоп ( ) 00/000 


因为 函数 每 次 被 调 将 应 用 组 件 的 名 字 
用 都 需要 获取 这 个 REDIS_CONNECTIONS = () 传递 给 装饰 名 。 


配置 键 ， 所 以 我 们 ER збій dl | 
十 脆 把 它 缓存 起 来 。 қ ef redis_connection (component, wait-1): ~ НО Ер в КІ . 些 


key = 'config:redis:' + component 








у ГР def wrapper (Function): 有 用 的 元 数据 复制 给 
包装 名 接受 | КИЕ efunctools .wraps (function) < 一 配置 处 理 器 。 
为 参数 ， 并 使 用 男 一 个 def callitargs, **kwargs): IA 
ра ре ү. > old config = CONFIGS.get (key, object()) 

қ _сопЕја = get config( 
如 果 有 日 配 置 存在 ， config connection, 'redis', component, wait) 
MARRE. 
config з |) її зелен 
如 果 有 新 配 着 存在， for k, у in _config.iteritems(): 创建 负责 FUE 
那么 获取 它 。 | config (КЕ .епсоде ('utf-8')] = v 信息 的 函数 。 
куйй R | if config 1= о1а_сопЁ1д: 
对 配置 进行 处 理 并 将 其 REDIS CONNECTIONS [кеу] = redis.Redia (**conf ig) 
用 于 创建 Redis it fiż. 
return function( 
将 Redis 连接 以 及 其 他 匹 | REDIS CONNECTIONS.get(kev), targs, **kwargs) 
配 的 参数 传递 给 被 包 囊 两 return call 
数 “ep maspas = return wrapper 81 Зе» о ,那么 创建 
пала ВНІ š У НЕ 
> 24+. 
сани ХЕТ GE Redis | | 
函数 的 包装 器 。 E KEEN 6 








ПППП*агд5П**Кмагд5  ОІООООРуЄпопОДОООДОООО000000 
ОБОДО0000000000000000а г950000000000000розібіопа! 
агдиглеп ПОКма г9500000000000000патеа argumenti 0000 
ОДООООО000000000000000000000000000000000000000000000 
О00000000000000000Руєћоп00000һр://тпо.02/ КМ5хП 


00005-160000000000000000000000000000000000000000 
0000геаіѕ соппесїіоп ( ОДОДОООДОДОДОДОДОДОДОДОДОДОО 
ООО0О000000000000000000000000000000000000009000 
ОсатегороДорООО0000000000000000000000000Ввеаїв 000000 
00000000 гедіз5 connection( ) ПО0000000000000000000000 
0000005-170000000гедї5 соппес+іоп ( ) 000005.1.100000 
log гесепї ( ) 00000 


00005-17 0000109 гесепї () 00 


зуль ноя @redis_connection('logs') di ti ) 装 

ХА | REE > def log recent(conn, app, message): — s Б 

义 和 之 前 展 小 'the old log recent() code' тж a 

的 一 样 ， 没 有 

发 生 任何 变化 。 log recent('main', 'User 235 logged іп!) 我 们 再 也 不 必 在 调用 
log recent() PRK 
时 于 动 地 向 它 传 递 日 


志 服 务 需 的 连接 了 。 


000 00005-1 7000000000“ 00" (од гесепі ( ) 0000000000 
О"ОДОДО00000000000000000000000000000000000070000000 
ОДОДООДООИЄЕр:// мумми. рућоп.ога/дем/рер5/рер-0318/ 1 


0000000000Огеді5 connection()flillog recent ( ) 0000 
ООООО0000000000000000000000000000000000000000000000 
ОДО00000000000000000000гедіз connection( )0005.2.3000 
ППассе55 time ( ) ППООООООООООООООООООООО000Аеаіѕп0000 
О000000000000000ге915 connection( ) П000000000000 


ПродеРовм. сОМДПОДерувм.СОмМ 00000 
ОО0000000000 


5.5 [I| 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU00000RedisUUUUUUUUUUUUU0U00000000000000000000D0UD 
О00000001РО0000000000000000000000000000000000000000 
ПОООООООООО00000000 


О0500000000000Аеаіѕ$В0000000000000000060000000000 
ОАеаіѕ 0000000000 


® ПрРуєһопрО00000000000000000000000000000000000000 
О000000000000000000000000000000000000000*000000000 
07000000 


D000ePUBw.COMDNHUUUePUBw.COM 0000 
О000000000000 


060 О0Ҝеаі: 000000 


UUUUUU 


UUUUUUUUUUUUUU 
UUUUUUUUUUUUDU 

e ПО000000000000 

e О000000000000 
。UUUUUUUUUUUUUUUUU 
e ОДО0000000 


UUUU00000RedisUUUUUUUUUUUUUU0U00000000000000000DD 
UUU0U000000000000000000RedisUDD 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
О000000000005000001РО00000000000000АеаіѕВо000000000 
UUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUU00000000000000000000000000Fake сапледро00000000 
О00000000000000ҮоитТміҒасер00Ғаке СсагледрорОООО00000 
UUUU000000000Fake СсагадероробУуев ДОООбОО0000000000 
ОДОДО0УУеБОДОООООО000000 


дорбеРуювм. сОМІДбДерРувм. СОМ ПОД 
О000000000000 


6.1 ПОП 


ПмлеБрорро И ПачкосотріесероорООб00000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОООО000000000000000000000000000Ссо0091епОДОО00000000 
[Betty м/пікербОООО00000000"? 0000000000000000000Вебсу 
WhiteDOO00000000000000WebOQ000000000000000000000000 
UU0000000000000000000000000000000000UWeb0000000000 
ОДООООО0000000000000000000000000000000000000000 
Ссоосдіедр ПООДОО00000007800000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ILU 


ОДООООО00000000000000000000000000000000000000000 
ПО0000000000000000000000000001000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000 


6.1.1 ПОП000000 


ОДООДО0000000000000000000000000000000000000000000 
ППППППЕаКе came0000000UUUUUUUUUUUUUUUUUUUUUUUUUUUUD 


ОО0000100р00000000000000000000000000000000000000000 
О0000000000000000000000000006-1000000000000000 


聊天 对 象 : 


Jean 
Jeannie 
Jeff 





П6-1 ОООООДО000000000000/е00000 





О0000000000000000000000000000000000001000000000 
ОДОООО00000000000000000000000000000000000000000000 
Кеа ПДОДООО000000000000Веаї ПООООООО000000000000000 
UUU00000000000000000000000Redis000000000000000Redis0 
UUU0000000000000000000000RedisUU0UPythonUUUUUUUUUUUDUD 
UU000URedisUUUUUUUUUUUUUUUUUUUU000000000000000Python 
0000 


UU0000000000000000RedisUU30000UUUUUUUUUUUUUUUDUD 
О000000000000000000000030000 


ОЗ ПОДр00000000000000000000000000000000 
0200000000000000000000000 


ОЗО0000000000000000000000000000001000000000000 
О0000000000020000000 


ОООООЗООД0О000000-КЕМОДОІРУ5НОДОІ ТКІМОДОДООДО0000 
ОДО00000000000000000ЗО00000000000МУЇ ПТООПЕХЕСООООООО 
ПППІКЕМПІРУӘНГІ ТЕІМОЗ000000006-1000000000000000 


00006-1 add update contact()(I 


如 果 联 系 人 已 经 存 ac list = 'recent:' + user 
Æ, MAKEM. pipeline = conn.pipeline (True) 
= pipeline.lrem(ac_list, contact) 


def add update contact (conn, user, contact): 准备 执行 原子 
< | 操作 。 


pipeline.lpush(ac_list, contact) < 将 联系 人 推 人 列表 
п 4ш. JR 
只 保留 列表 里 面 的 前 pipeline.ltrim(ac list, 0, 99) 的 最 前 端 


100 个 联系 人 。 pipeline.execute() ы 
实际 地 执行 以 上 操作 。 





UU00000000000000000000000add update contact()IHHU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUULREMUUUOUDDU 


def remove contact(conn, user, contact): 
conn.lrem('recent:' + user, contact) 


ОДООООО00000000000000000000000000000000000000000 
ОООД0О000РУспоПООООООООООООООО00000000000ОРУСПОПООО 
0000000006-2000 


00006-2 fetch_autocomplete_list()[| 


def fetch_autocomplete list (conn, user, prefix): 
candidates = conn.lrange('recent:' + user, 0, -1) H зав 
检查 每 个 候选 matches = [] 获取 自动 补 企 
联系 人 。 | for candidate in candidates: 列表 。 
if candidate.lower() .startswith (prefix): 
matches.append (candidate) 


AE ля ЗЛ <— 返回 所 有 匹配 的 联系 人 。 


fetch autocomplete list () ОПОПОДОДОДООДОДО0000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО0О00000000000000000000 


ОООД00000000"00000000000000000000000070000000000 
ОДОДОД000000001000000000000000000000000000000000000 
ОООО00000000000000000000000000000000000000тозі- 
recentiv-used 15 00000 еазе--гесеп у-изеа 15 ШПОООООО 
ООО0О00000000000000000000000 


6.1.2 [III] 


UU00000000000RedisUUUUUUUUUUUUUUU000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUU000U000000000000000000000000000000UUUUURedisU0000 
UUUUUUUUU 


ППҒаке Сатеру000000000000000000000000000000000 
UUUUUUUUUUUUUUU 一 一 UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUU 00” ОО00000000000000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUU000000000000000000000000000000000UUUUUURedisUUD0 
ОДО000000000 


ОДОООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОО0000000000000000000000000000000000000000000000—— 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ООД000000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОО000000000000 


UU0000000000000000000000000000000000UabcDUabcab 
abcdU.…UabdUUUUUUUUUUUUUUUUUabcDUU000000000000 
абьг...00бавадророрр0000000000абб 2000000000000000 
аоађоо000000000000004КАМ№МЕПБО0000000арьг. . .llabdi I 
ОДООООО00000000000000000000000000000000000000000000 
DDD00000abbz. ..О000000000000ааоррорбророророрбодоб 
2КАМСЕПОО0000000000000 


О006А5СІИПО000002П0000000000000<000000004000аве0 
о0000000000авс П0000000авапбоо000000аюреПооо00000000 
О0000<000аюьо0000000000аво{П0000000000арсо000000000 
О00000000000аюсВооо00000000000000000000А5СИО0000000 
ораодоо000000 О0000000000000авароооо000000абсо00000 
ППППППар ` В0000000000000ава+О00000000000 


ОДООДОО000000000000000000000000000000000000000 
ПргедесеѕѕогП0000000000000000000000000005$иссеѕѕог00 
ОДООООО000000000000000000000000000000000000000000000 
О00000000000000000000000000000006-З0000000000000000 
О0000 


00006-3 find prefix гапде() [Ill 


valid characters = ' abedefghijkimnopgrstuvwxvzj' <— 准备 一 个 由 已 知 字符 组 成 


def find prefix range(prefix): 的 列表 。 


розп = bisect.bisect_left (valid characters, prefix[-1:]) 在 字符 列表 中 
suffix = valid charactersliposn ог 1) - 1) қане : 
= $ 查找 前 级 字符 


“у. > 

J& Al нії ЗК return prefix[:-1] + suffix + '(', prefix + '{' 4— = 

字符 。 б | 所 处 的 位 置 。 
返回 范围 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О000000000000+#іпа prefix гапде() ОД000000061 5ес 0000 
ОДООООД000000000000000000000000000000000000 


0000000 О0000аргП0000000000А5СИО000000000000000 
ОДООО000000000000000000000000а02г2.00000000000000000 


О00000000000000000000000000000ТР-8П0ТР-16000ТР- 
З2П000000ТР-1600ТР-З20000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОООО0000000000000000000000000000000000  О0000Х0 


О00000000000000000000000000000000000ТР-800000000 
ПООТЕ-1 600 ТР-3 200000000000 па ПОДООООО000000000000000 
ОООД00000000000000000000000000972-1600000000Упісоде 
OOU -НА96БОДОУТЕ-З200000000Упісодерр)0--2ННД 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
10бООД000000000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
ОДО000000000000000001280000000009910000000000000000 
ПО00000000000000000000000000000МАТСНОМОЕТІПЕХЕСПОО0 
О0000000000000000000000000006-4000000000000000 


00006-4 autocomplete оп рге?іх () 00 


def autocomplete оп prefix(conn, Guild, prefix) : 
start, end = find prefix range (prefix) 根据 给 定 的 前 缀 

2 ET. 1 
identifier = str(uuid.uuid4()) 





ЊЕ | 
start += identifier H ih REH 
将 范围 的 起 始 元 素 end += identifier 的 起 点 和 终点 。 
zset name = 'members:' + guild 
和 结束 元 素 添 加 到 і. 
有 序 集合 里 而 。 چ‎ conn. zadd(zset name, start, 0, end, 0) 
pipeline = conn.pipeline (True) 
while 1: 
try: 
АВИ Ал: pipeline.watch(zset name) 
И ۹ | sindex = pipeline.zrank(zset пате, start) 
素 在 有 序 集合 中 的 eindex = pipeline.zrank(zset пате, end) 
排名 。 erange = min(sindex + 9, eindex - 2) 
获 直 范围 内 的 值 , ЈЕВ pipeline.multi () 
عد‎ $r. арыда pipeline .zrem(zset name, start, end) 
ر‎ ак pipeline.zrange(zset name, sindex, erange) 
和 结束 元 素 。 items = pipeline.execute () [-1] 如 果 白 动 补 全 有 序 集 
作 正 在 执行 ,那么 从 获 except redis.exceptions.WatchError: 收 过 раї 
кат IIIA экн а 
~ gd 
始 元 素 和 结束 元 素 。 l> return [item for item in items if '{' not in item] 


autocomplete on prefix( )ОДООО0000000000000000000 
ОДООООО0000000000000000000000000000000000000000 
WAT СНОООООДОООДООО000000000000000000000000000000000 
ОДО0000000 


ОДОООО0000000000000000000000000002А400000000000000 
О000000000000000002КЕМПО00000000000000000000000006- 
З ОДОД0000000000 


00006-5 join диіта()0001Теаме guild()(II 


def join guild(conn, guild, user): 
conn.zadd('members:' 4 guild, user, 0) 


def leave guild(conn, guild, user): 
conn.zrem('members:' 4 guild, user) 


ОДООД000000000000000000000----ОО0000000000000000 
ОДБОДОО00000000000000 


ОДОООО000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000 
Usorted іпдехП000070000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО00000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
О0000000000000%мАТСНОО00000000000000000000000000000 
ПО000000000000000000000000000000мАТСНОВООО000000000 
МАТСНОПООООООООО00000000000000000000 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


6.2 ПОП 


ОДО00000000"00"0000000000// Пасамігеророр0С0000000 
ОДООО00000000000000000000077)0гетеазерродоро000000000 
ПОДЛОДОДОГОО5Рагеа-птетогу data structure[|[ ДД0007000000 
ОДОб0000000700000000Веаїв ДДМАТСНОДОДООДОДООООДОМАТСН 
ООО00000000000000000000000000000000000000000000000 
ООДО00000000Л// Dloptimistic locking 


UUUUUUUUU 000000000000000000" 0000000000000000000 
О0000000000000000000000000000000000Аеаіѕ$ 8000000000 
ПО0000000000мАТСНОВООО0О0000000000000000000000000000 
ОДОООО000000000000000000000000000000 


ОДООООО0Ор00000000000000000000000000000000000000 
ILLRedis ро рор00000000005согерор0000Веаї о ор00000000 
ОДОООО000000000000000000000000000000000000000000 
Кеа ПДОДОО00000000Веаїь Др0000000Веаї О05ЕТМХОДО00 
ОДООООД000000000000000000000000000000000000000000000 
ОДО00000 


О000000“0000МАТСНОО0000000000000000000”00000000 
О0000000000000000000000МАТСНО00 


6.2.1 ПІП) 


O00000 T 00000000000000000000000000000000МУЇ ТІП 
ЕХЕСОДОДО000004.600000000000000000000МА ТСНОМОЇ TIL] 
ЕХЕСОПОООООО000000000000000000000000000000000000000 
ГОДОІФООО00000000000000000000000000000000000000000 
О00000000000000000000000006-20000000000000000000000 


market: — zset users:17 — hash inventory:17 — set 











Шеті! 





ItemA.4 35 name ' Frank кетм 
НетС.7 48 funds ' 43 ltemN 
ltemE.2 ' 60 ! 

ltemG.3 ' 73 


users:27 — hash inventory:27 — set 








ltemO 


name | Bill Шет 


funds ! 125 кето 





06-2 П00000000004.600000000000004000——етАПіетСетЕбіёетеро00000 
0003504806007 ЗООО0000000100000407 020300000000К6гапкОВИОДОООО000000000 
000000000000 











ОДООО0000000000000000000000000000000000000000000 
ОДМАТ СНОДООООООДООДОООДООД0О00000000000000000000000 


ООО000000000006-60004..4.20000001156 ісет() 00000000 


00006-6 004.4.20001015+ 1і4ет() ПП 


| 发 生 的 变动 。 
pipe.watch(inv) 
if not pipe.sismember(inv, itemid): 验证 被 出 售 的 商品 仍然 存 
pipe .unwatch () 在 于 卖家 的 包 庄 里 面 。 


return None 


def list item(conn, itemid, sellerid, price): 





pipe.multi() 
pipe.zadd ('market:', item, price) 
pipe.srem(inv, itemid) 


将 商品 次 加 到 
市 场 里 面 。 





pipe .execute () 
return True 
# <s 


00006-600 1151 item( ) П0000000000000000000000000 
МАТ СНОМОЇ ТІПЕХЕСОООДОДОДООО000000000000004..4.200000 
list і+ет() 00000000 


ПО000000000000000000000000000000000000МАТСНО0000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОО0000000000000000000000000000000000000000000мАТСНО 
О00000000000000000006-70004.4.3000000рчгсһаѕе item() 
ОДО000000 


00006-7 ПП4.4.ЗПППригсһаве ієет()ПП 








def purchase_item(conn, buyerid, itemid, sellerid, lprice): 监视 市 场 以 及 买 家 个 人 
#... 信息 发 生 的 变化 。 
pipe.watch('market:', buyer) жик 
price = pipe.zscore("market:", item) 检查 商品 是 否 已 经 售 出 、 商 品 
funds = int (pipe.hget (buyer, 'funds')) 的 价格 是 否 已 经 发 生 了 变化 ， 
if price != lprice or price > funds: 以 及 买 家 是 否 有 足够 的 钱 来 
pipe.unwatch() 购买 这 件 商 品 。 
return None 
pipe.multi() 
pipe.hincrby(seller, 'funds', int(price)) 将 买 家 支付 的 钱 转移 给 
pipe.hincrbv(buverid, 'funds', int(-price)) у ы 
pipe.sadd (inventory, itemid) 卖家 ， 并 将 卖 出 的 商品 
pipe.zrem('market:', item) 转移 给 买 家 。 
pipe .execute () 
return True 
Жаа 


00000006-6000 1151 ієет()0000000006-700 
purchase item( ) ПЗОО0000000000000000000МАТСНОМОЕТІП 


ЕХЕСПООООООО 


О0000000000000000000000030000000000000003000000 
1000000000210000000050000000001000000000050000000000 


90000000006-1000000000 


06-1 00000000000690000 











ши 00000 000000 000000 0000000000 


100001000 145 000 27 000 80 000 











ши 000000 000000 000000 0000000000 





00005000 206 000 161 000 498 ms 


0006-1П00000000000000000000000000000000000300000 
25ОПО000000000000000000000000010 тѕ0000500 пл500000 
ПО000000000МАТСНОМОЕТІПЕХЕСПОООВООО00000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
WAT СНОООООДОООб0О0000000000000000000000000000000000 
ОДООО0000000000000 


6.2.2 ПП 


ОДОООД0000000200000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 


ОДООООО0ОДр00000000000000000000000000000000000000 
ОДОО000000070000"0000000000000000000000000000000000 
ОДООО00000000000000 


HNORedis додобрбіоскорорбіоскі а ДОДОДОоск штеош 500 
D00000000000000RedisD000000000000000000000000000000 


ОДООООО00000000000000000000000000000 


。DUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUDU 

e OUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 

。UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 

。DUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDDU 
UUUUUUU 


UURedisUUUUUUUUUUUUU100 000000000000000000000000 
0225 ОООПООООООООООО0000000000000000000000000000000 
О0000°00000000000000000000000000 


6.2.3 (lijRedisi ППП 


ППКеа!  ПОД0ЛЛО00РОО00000000000000000000000000000 
Двеаї  дОООДОДОРООДОДОООДОО0000000000000000000100000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО00000 


О00000000000000000000000005ЕТМХОПО0000000000000 
ООО000000000000000000000000000000000001280991000000 
ОДООО000000000000000 


ОДООО0000000000000000000000000000000000000000000 


0000006-8000 


00006-8 acquire Тоск()0| 


def acquire lock(conn, lockname, acquire timeout-10): 


identifier = str(uuid.uuid4()) <— 128 位 随机 标识 符 。 


end = time.time() + acquire timeout 
while time.time() < end: 
ії conn.setnx('lock:' + lockname, identifier): <— PAREM, 
return identifier 


time.sleep(.001) 


return False 


acquire 1оск( ) ППОО000000000000005ЕТМХО0000000000 


ОДОООО000000000000000000000000000000000000000000000 
ООД00000000000000000000020000 


ООДО000000000000000000000МАТСНО00000006-900000000 


ОДООООД000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000 


00006-9 purchase item with 1оск( ) 00 


def purchase item with lock(conn, buyerid, itemid, sellerid): 


buyer = "users: %$s"%buyerid 

seller = "users:%s"%sellerid 

item = "%s.%s"%(itemid, sellerid) 
inventory = "inventory:%s"%buyerid 


locked = acquire lock(conn, market) 
if not locked: 
return False 


pipe — conn.pipeline (True) 
Ску: 
pipe.zscore("market:", item) 
pipe.hget (buyer, 'funds') 
price, funds = pipe.execute() 
if price is None or price > funds: 
return None 


pipe.hincrbv(seller, 'funds', int(price)) 
pipe.hincrbv(buver, 'funds', int(-price)) 
pipe.sadd(inventorv, itemid) 

pipe.zrem( 'market:', item) 

pipe .execute() 

return True 


finallv: 
release lock(conn, market, locked) 





尝试 获 
<1— 取 ЕД о 


Ki ЕВ ЖЕ ВУ ТІ ии ge: ТУ 
在 出 售 ， 以 及 买 家 是 否 有 
足够 的 钱 来 购买 该 商品 。 


将 买 家 支付 的 钱 转移 
给 卖家 ， 并 将 售 出 的 
商品 转移 给 买 家 。 





释放 锁 。 
اس‎ 


ОДД0000006-9П0000000000000000000000000----0000000 
ОДООООД00000000000000000000000000000000000000000 


ОДООООО00000000000000000000000000000000000000000 
0000000006-10П0ПгеТеаз5е Тоск ()ОДОДОО0000000000000000 
МАТ СНОООООДОООДООД000000000000000000000000000000000 


ОДОООО00000000000000000000 


00006-10 release Тоск() | 


def release lock(conn, lockname, identifier): 
pipe - conn.pipeline (True) 


lockname — 'lock:' 4 lockname 
while True: 
Ery: 检查 进程 是 否 仍 
pipe.watch (lockname) 然 持 有 锁 。 
if pipe.get (lockname) == identifier: 
pipe.multi () 
pipe.delete (lockname) 
pipe .execute () 释放 锁 。 
return True 

pipe.unwatch() 

break 

except redis.exceptions.WatchError: 有 其 他 客户 端 修 
pasg 改 了 锁 ， 重 试 。 


return False < 一 进程 已 经 失去 了 锁 。 


DO0000000000000Drelease Лоск ( ) П000000000000000000 
О0000000000000000000ге1еаѕе lock( ) В0000000000000000 
000----ОООО00000000000000000000000000000000000000000 
ООО00000000000000000000000000000000000000000000000 
ООО00000000000000000000000000000000000000000000 
release 1оск() 00000 


DLLIDDLIWAT СНООООООООДОДОДОДОООДОДОДОДОДОД000006-2 
ПО000000МАТСНОООООООО000000000000000000000000000000 
0000 


06-2 0000600000000 


ти 000000 |000000 | 000000 | 00000000000 











OI 000000 |000000 | 000000 | 00000000000 





= ер ы” 














ПО00МАТСНООО000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000 


6.2.4 ДПДГ 


О0000000000000000000000000000мАТСНО0000000—00 
ОДООООО000000000000000000000000000000000000000000000 


ОДООООД000000000000000000000000000000000000000000000 
ОДОО00000000000000 


06-зПО0000000000000000000000006-2000000000000 


П6-3 ДОД0000690000000 


100001 ПО0О000УУАТСН 14ms 
1000010000000 х 1ms 
1000010000000000 каат 
SUUUUTUUUUUUWATCH 150ms 




















20UUU10000UUU 5ms 

5 000020000000000 ме шю o <2ms 

БПООО05О000000М/АТСН 498ms 
5000050000000 эю оно o 14ms 














Ши ШШШШП |000000 | 000000 | 00000000000 








06-ЗПООДОО00000000000000000000000000000000000000 
0600000220 0000230 ООО00000000000000000000000000000 
О00000000000000000000030000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000 
МАТ СНОООООДООООООД00000000000000000 


О0000000000000000000000000000000000000000006-300 
ОО0000000000000000000000000000000МАТСНООО0000000000 
ILU 


О000006-4000МАТ СНОДООООООООООООДб0О000000000000 


买 入 物品 的 数量 〈 数 量 越 多 性 能 越 好 ) 
== == 使 用 WATCH 一 一 使 用 粗 粒度 锁 使 用 细 粒 度 锁 
120 000 


90 000 


60 000 





30 000 





1 个 卖家 /1 个 买 家 5 个 卖家 /1 个 买 家 5 个 卖家 /5 个 买 家 


06-3 060000000000000000000000000000000V0000050000001000000000000000 
UUUUUUUUUUUUUU201 


重 试 次 数 〈 次 数 越 低 性 能 越 好 ) 








= ee 使 用 WATCH 一 一 使 用 粗 粒 度 锁 使 用 细 粒 度 锁 
200 000 
150000 ` — 

ar 
ат 
4” 
Ф 
100000 - 2 
LI ^ 
... ġà 
И К. 
50 000 = 
1 个 卖家 /1 个 买 家 5 个 卖家 /1 个 买 家 5 个 卖家 /5 个 买 家 


06-4  П6ОПДООДДООО0000000000000000000000000000000000000000000000000000 
ЕЕНЕЕЕЕЕЕЕЕНЕЕЕЕЕЕЕЕЕЕЕЕШЕЕЕНЕЕЕЕЕШЕЕЕШЕ 








06-5П0000МАТСНОО00000000000000000000000000000000 
ОДО00000000 


延迟 时 间 《〈 越 小 性 能 越 好 ) 
。*。。。 使 用 WATCH 一 一 使 用 粗 粒 度 锁 使 用 组 粒度 锁 
600 


450 


300 К 





150 - Ba 


е 
е 
е 
е 
е 
е 
е 
е 
. 
. 
ә 
е 
е 
е 
e 
. 








1 个 卖家 /1 个 买 家 5 个 卖家 /1 个 买 家 5 个 卖家 /5 个 买 家 


06-5 00000000000UUUUUUUUUUUU0000000000UUUUUU14 ms0000000000UUUUUUUUDUU 
UUUUUUUUUWATCHOO000UUUUUUUUU>00 ms 











UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUD 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UU00000Udogplle00 一 一 dgogplle0000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О0000000000000000000000000000000000мАТСНО000000000 
ОД0000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000 


6.2.5 ПОДО000000 


ОДООД00000000000000000000000000000000000000000000 
ОДОООО0000000000000000000 


ОО00000000000000000000000ЕХРІКЕПОО00000000000 
КеаіѕОПОООО0000000000000000000000000005ЕТМХПЕХРІКЕП 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДОО0000000000 


ОДООД0000000000000000000000000000000000000000000 
ОДОДООД000000000000000000000000 


00006-110000асаиіге 1оск( ) П0000000000000000 


acquire lock with timeout ( ) 000 


00006-11 acquire lock with timeout()(II 


def acquire lock with timeout ( 128 位 随机 
conn, lockname, acquire timeout=10, lock timeout-10): =o 
identifier = str (uuid.uuid4 ()) 标识 符 。 
lockname = 'lock:' + lockname 


lock_timeout = int (math.ceil (lock_ timeout) ) ڪڪ‎ 确保 传 给 EXPIRE 
end = time.time() + acquire timeout 的 都 是 整数 。 
while time.time() < end: 
if conn.setnx(lockname, identifier): 获取 锁 并 设置 
conn.expire ((lockname, lock timeout) 过 期 时 间 。 
return identifier 
elif not conn.ttl (lockname): 检查 过 期 时 间 ， 并 在 有 
conn.expire (lockname, lock timeout) 需要 时 对 其 进行 更 新 。 


time.sleep(.001) 


return False 


ППасачіге lock with timeout()UUUUUUUUUUUUUUUUUUD 
ОДООООО000000000000000000000000000000000000000000000 
ОДОДООО0000000000000000000000 


| 轩 сола 2.6.12ПО000005ЕТОООПОООПООПООПОООПООПООЗЕТМХОПОЗЕТЕХ 
ОООО00000000000000000000000000000000000000000000000000 








6.1.20000000000000000000000000000000000000000000 
ОДООООО00О0000000000000000000000000000000000000000000 
ОООО0000000000000МмА ТСНОДООООООДООДООД0О0000000000000 
О000000000000000000000000<0000000000000000000000000 
ПО0000000000000МАТСНООООО000000000000000000 


UU000000000000000000000000URedisUWATCHOMULTID 
ЕХЕСОДОДО0000000000000----ОО000О000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 


О0000000000000000000000000АРІ000000000000000Аеаіѕ=000 
ПО00000000000000000000000МАТСНОПОО00000МАТСНО000000 
UUUUUUUUUUUDUDU 


ОООО0000000000000000000000000000007/0сомпіїпо 
ѕетарһогерОО00000000000000000000000000000000000000 
ОДОООО000000000000000 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


6.3 ППО 


ОД ДОбООДОО00000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000 


ОДООДО0000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООДОО00О0000000000000000000000000000000000005000000 
ОО000000006000000000000000000000000000000000000000 
П“ О00000000000" 000000 


О0000000000000006.200000000000000000000000000000 
ОДООООО0000000000000000000 


О00000000ғаке саплерродробОООООО0О000000000000Овбаке 
баппеП ПП ПП ПП ППТ 
ООДОО0ОО0ОД00АРІОООООДООООО00ОО000О0000000000000000050 
ОО0000000 


ПООСО00000000000000000асачіге ѕетарћоге ( ) 0 
release semaphore( ) В000000000000АРІП0 


6.3.1 [|N III 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000 


О0Аеаіѕ000000000000000000000000000000000000 
ЕХРІКЕППОООО000000000000000000000000000000000000000 
ОДООО000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОООД000000000000000000009пїх000006-60000000000000000 
0000 


semaphore:remote —— zset 
c5a58232-0d6c-467f-976ft-4577163b2412 | 1326437034.113 
Acec3d88-a80e-4713-832c-42ec957fb845 | 1326437037.511 
c73f379d-6a5b-48a6-9796-b6f9bbb55402 | 1326437037.621 


40f93169-f8c7-40d3-a342-f0ec68b17dde . 1326437038.765 





06-6 DUO00000UUUUUU 





ОДООО0О000000000000000000000000000000000000000000 
ООД000000000000000000000000000000000000000000000000 





ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000 
Utimeout number мат'мер )000000006-12000000000000000000 


00006-12 acquire 5етарпоге()ПП 


def асаміке вепарһоге(сопп, semname, limit, timeout=10): 


identifier = str(uuid.uuid4()) У 
пом = time.time() 128 位 随机 
清理 过 期 的 信 жи MT 标识 符 。 
Е іре1іпе = сопп.ріре1іпе (True 
号 量 持 有 者 。 ei рір ӨРІЛЕ | 
pipeline.zremrangebyscore (semname, -іпЕ!, пом - timeout) 
pipeline.zadd(semname, identifier, пом) <- 
ipeli identifi 尝试 获取 
pipeline.zrank (semname, identifier) = 
检查 是 否 成 if pipeline .execute() l-11 < limit: | 信和 号 量 。 
功 取 得 了 信 return identifier 
m 
чн. conn.zrem(semname, identifier) w 
return None МАЊИ ERM, ІШЕ 
之 前 添加 的 标识 符 。 


асачіге ѕетарћоге ( ) П0О00000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
00 


00006-1З0000000000000000000000000000000000000000 


00006-13 release ѕетарһоге () 00 


def release ѕетарһоге (сопп, semname, identifier): 
return conn.zremisemname, identifier) «оо 如 果 信 号 量 已 经 被 正确 地 释放 ， 那么 
返回 True; 返回 False 则 表示 该 信 
号 量 已 经 因为 过 期 而 被 删除 了 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 


ОООДОД0ДАОВОООООАОДООООООВОДОДООЗ0000000АОСДООО000000 
ООО0ВОДООЗ0000000000000000А0ОД00000007007АСО000000000 
ОДООООО000000000000000000000000000000000 


ОДООООО00ОД0000000000000000000000000000000000002// 
Дора паї ороооборОДООДОб0000000000000000000000000000 
ОДБООО000000000000 


6.3.2 ПІП 


ОДООООО000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ООООО00О00000000000000000000000000000000000200000000 
ОДОО0000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОД00000000000000000000000006 ппегороророборО0000000 
ОДОООО0000000000000007000000000000000000000007000000 
ООДОО0000000000000007 000000" 00000000000000000000000 
О000000000000000000000006-7000000000000000000000000 
ILU 


semaphore:remote:owner 一 H zset 


8f53c28e-4ec5-4dc3-ad9e-132bd7b1539b 
2a0a3d3c-034b-454a-bedd-da79f3284922 


183bd37a-6bb9-424b-aaad-34a49454687d 
e8bce9c2-f994-46f5-ad86-230e84b1644d 


semaphore:remote:counter --- string 
| 7361 | 


06-7  ДПОбО000000000 








ОДООООО0ОД00000000000000000000000000000000000000 
ООДО000000000000000/21У ТЕВ5 ТОКЕДОДООДООМЕТЕНТ5000000 
UUUUUUUUUUUUUUUUUUUUUU 


00006-140000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО00000000 


00006-14 acquire fair зетарћоге()| 


def acquire fair semaphore(conn, semname, limit, timseout-10): 
identifier = str(uuid.uuid4 ()) 
czset = semname + ':owner' 128 位 随机 
ctr = semname + ':counter' 标识 符 。 


now = time.time() 
pipeline = conn.pipeline (True) 





pipeline.zremrangebyscore (semname, '-inf', now - timeout) 删除 超时 的 
pipeline.zinterstore(czset, (czset: 1, semname: 0)) 信和 号 量 。 
pipeline.incr (ctr) 对 计数 器 执行 目 增 操作 , 并 获取 计 
counter = ріре1іпе.ехесибе () l-11 数 器 在 执行 自 增 操作 之 后 的 值 。 
pipeline.zadd(semname, identifier, пом) мене (>: 
pipeline.zadd(czset, identifier, counter) 尝试 获取 信号 量 。 
pipeline.zrank(czset, identifier) ДЕ ЖИВЕ FE A, KF BF F: Уш 

if pipeline.execute()[-1] < limit: 是 否 取 得 了 信和 号 量 。 


return identifier «но А - з 
客户 端 成 功 取 得 了 信和 号 量 。 

pipeline.zrem(semname, identifier) 

pipeline.zrem(czset, identifier) 


pipeline.execute() | | 客户 端 未 能 取得 信号 量 ， 清理 
return None 无 用 数据 。 


acquire fair ѕетарһоге ( ) 000000 


acquire semaphore( ) ОПОДООДОО00000000000000000000000 
ОДОДОО0000000000001000000000000000000000000000000000 
ОДДОД0001900000000000000000000000000000000000000000 


OOO 


03200000000000 оророзгдророрвеаї оророборордорбооо 
0022: 100000000000000000000000000000320000000000200 
ООДОД0000000000000000000000000000000190000000000000 


00000000640000 


06-800010083 7200001326437039. 10 00000000000000000 


UUUUUUUUUUUUUUUU2>0 


因为 没有 超时 信和 号 量 存 在 ， 所 以 zremrangebyscore() 和 zinterstore() 两 个 调用 没有 执行 任何 动作 : 


semaphore:remote:counter --- string incr(ctr) 
7361 7362 











semaphore:remote ——ə> b = n P  "-—. zset 
8f53c28e-4ec5-4dc3-ad9e-132bd7b1539b 1326437034.113 
2a0a3d3c-034b-454a-bedd-da79f3284922 1326437037.511 
183bd37a-6bb9-424b-aaad-34a49454687d 1326437037.621 zadd(semname 
e8bce9c2-f994-46f5-ad86-230e84b1644d 1326437038.765 identifier, now) 
a0d48eac-6a10-4675-8da8-8998f0f9a58b 1326437039.100 

semaphore:remote:owner zset 
8f53c28e-4ec5-4dc3-adge-132bd7b1539b 7350 

2a0a3d3c-034b-454a-bedd-da79f3284922 7353 
183bd37a-6bb9-424b-aaad-342349454687d 7354 ун 
e8bce9c2-f994-46f5-ad86-230e84b1644d 7361 тш каа. ш ик 
a0d48eac-6a10-4675-8da8-8998f0f9a58b 7362 











zrank(czset, identifier) —— ~ 


П6-8 acquire fair ѕетарһоге ()0000000 


ОДООО0000000000000000000000000000000000000000000 
ОО000000000000000000000000000000000000000006-150000 
ОДОО0000000000 


00006-15 ге1еаѕе fair зетарћоге()| 


def release fair semaphore(conn, semname, identifier): 
pipeline = conn.pipeline (True) 返回 True МЕНЕЕ 
pipeline.zrem(semname, identifier) ві mE ығы 
pipeline.zrem(semname + ';owner', identifier) Ж, jam Канза Дота IU 
信号 基 书 经 内 为 超时 而 被 删除 了 。 


return pipeline.execute() [0] 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
0000000000000Пасаміге fair зетарпоге ()0000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДОООО0000000000000000000 


6.3.3 ПІП 


ОООД0000АРІОДОДОРаке Game00000000streamDUUUUUUUUD 
О00000000000000000000000000000000000010000000000000 
О00000000000000000000000001000000000АРІП00000000000 
ОДОООО00000000000000000000 


ОДООООО0ОД000000000000000000000000000000000000000 
О000000000000000000006-160000000000000 


00006-16 refresh_fair_semaphore()[|[[] 


更 新 容 户 端 竺 | def refresh fair semaphore(conn, semname, identifier): 
有 的 信号 量 。 if conn.zadd(semname, identifier, time.time()): 

release fair semaphore(conn, semname, identifier) 
і return False 


告知 调用 者 ， 客 户 端 


已 经 失去 了 信和 号 量 。 терик True «оз 客户 端 仍然 持 有 信和 号 量 。 


О000000000000000000000ге+геѕћ_Ғаіг ѕетарһоге ( ) 00 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОО000000000000 


ОДООООО00ОДрО000000000000000000000000000000 


6.3.4 O00000 


0006.2000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000 


ОДОДОД0000АОВООДОООД0ОО00000000000АОООООО0000000000 
ОВОПОДООО0ОД0000000000000000000000000000В80000000000 
ПООО0АОО00000000000000000000000000000000А0"00"ВО000 
ООДОД0ВО00000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОООО0000000000000000----ООСО0000О0000000000000000000 


ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000 


ОДООД0О00000000000000000000000000000000000000000 
6.2..0000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О000000000000000006-1 7П000000000000 


00006-17 acquire semaphore with Лоск () [Ill 


def acquire semaphore with lock(conn, semname, limit, timeout=10): 
identifier = acquire lock(conn, semname, acquire timeout=.01) 
if identifier: 
trv: 
return acquire fair зетарћоке(сопп, semname, limit, timeout) 
finally: 
release lock(conn, semname, identifier) 


ОДООООО000000000000000000000000000000000000000000 
Ор00000Веаї  ПОДОООО00000000000000000000000000000000 
ОДОООО0000000000000000000000000 


e ООООДО0ОД0000000000000000000000000000000000000000 
ОДООД0000000000000000 

e ООООД0ОДОООО00ОДОО0О000000000000000000000000000000 
О000000 

e ООООО0ОД000000000000000000000000000000000 


0006.2000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00О0000000000000000000000000000000000000000000 
000000 


ОО00000000000000000000АРІО0000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О00000000гороёѕ.ёхєОООО00000000000000003000000000000 
ОДООО0000000000000 


ОДООДО0О000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДО000000000 


ПродеРовм. СОМІДОДерувм.СОмМ ДОООП 
ОО0000000000 


6.4 ПОП 


ОО0Муеороо00000000000000000000000000000000000000 
ООО000000000000000000000000000000000000000000000000 
Бробророрборородоророрлолі fitask ачечепроооооооооооооо 
[JActiveMQ[]RabbitMQ[|Gearman[]|Amazon 5О5ППППППОПИППП 
ОООО000000000000000000000000000000000000000000000000 
ООО0000/000000000000/0000000000000000000000000000000 
00000 


ОДООО0О000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000 


6.4.1 00000 


О00000000000000000000000000000000—=0000000Е1ІРОр 
О00000000ғОБО000000р'погієуооооооооооооо000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОО000000000 


О0000000ғаке сатедророрОВОООДООООДОДОДОРаке 
СатеПОО0000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 


ППППсоде омУДОДООООООООООДООООО0ОО0000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 


[worker ргосез55 ПЛ 


DLILLLLLILLUU 'DLILLU' Dfirst-comeljfirst-servedI пп оо 
DDO0000000000000000000000000000300050000000dRedisg00 
DDODDDDODRPUSHOLPUSHODRPOPOLPOPODODODODODDODDDD0D000000 
ПОООКРУЗНОООООООО0ОО000ООО0О00О000000000000000000000000 
ПОООО000000000000В8С-РОРОДООООООООООДО000000000030000 
ООООО0000000000000000000000000000000000000000000000 
ООООООДО00000000000000000000000000 


О000000000Аеаіѕ=00000000005030000006-90000000000 
OOO 


queue:email 一 list 


f'seller id':17, item_id':'ltemM', 'price':97, 
'buver id: 27, 'time' : 1322700540.934) 





П6-9  ПОДООО00000000000 





О00000000000000000000000000000000000000000Ј50№0 
OOOOOORPUSHOOL SO МОП000000000000000000000050 00000 
О000000000000000000000000000000000000000Ј50 000000 
00006-1800000000000000000000000000000 


00006-18 send sold email via диеце()ПП 


def send sold email via queue(conn, seller, item, price, buver): 
data = | 
'seller id': seller, 
litem id': item, 


іргісе!: price, 准备 好 待 发 送 邮件 。 
'buver id': buyer, 
'time': time.time() 将 待 发 送 邮 件 推 


) 人 队列 里 面 。 


conn.rpush('queue:email', json.dumps (data)) 


send sold email via дшейе() ПП0000000000000000000 
ОДОООО000000000000000 


ОО00000000000000000000006-190000000000000000000 
ВІ РОРООООООООДООО00)5ОМОДОДО0000/5О0 МОДОДООООДОО00000 
ОДООО0000000000 


00006-19 process sold email диейе()ПГ 





def process sold email queue (conn) : 尝试 获取 一 封 待 
while not QUIT: ы 
packed = сопп.рірор(І'єямеце:епаі1'ї, 30) q— 发 送 邮件 。 
ії not packed: 队列 里 面 暂时 还 没有 
continue FRIE, ER, 从 JSON 对 象 中 解码 
< 出 邮件 信息 。 


to send = json.loads (packed [1]) 
GEY: 


fetch data and send sold email (to send) 
except EmailSendError as err: 从 JSON 对 象 
err, to_send) 





log error('Failed to send sold email", 中 解码 出 邮 
else: 件 信 息 。 
log success ("Sent sold email", to send) 


process sold email диеие ( ) ОДОДООО0О0000000000000 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДОООО00000000000000000000000000000 


100000000 


ООВЕРОРООООО000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О00000000006-200000000000000000000000000000000000000 
ОДД000000)5О0 МОДОООООДОО0000000000000 
I'FUNCTION МАМЕ", [ARG1, ARGZ, ...110 


00006-20 worker watch диеие () 00 


while not QUIT : 


def worker watch ачеце(сопп, queue, callbacks): 尝试 从 队列 里 面 取出 


packed = conn.blpop( [queue], 30) 一 项 待 执行 任务 。 
if not packed: 队列 为 空 ， 没 有 任务 
continue 需要 执行 ; 重 试 。 
name, args = json.loads (packed [1] ) «—— 解码 任务 信息 。 
if name not in callbacks: Р Ба у 
log_error ("Unknown callback %5"%пате) 没有 找到 任务 指定 的 回调 函 
callbacks [name] (*args) <- 执行 任务 。 


ОДООООО000000000000000000000000000000000000000000 
0000 


2000000 


О00000000000000000000000000000000000ғаке Gamelll 
ОДООООД000000000000000000000000000000000000000000000 
ПО000000000000000000000000000ВЕРОРП00ВАРОРБО0000000 
ПО00000000000000008ЕРОРОП000000000000000000ВАРОРПО0 
ОДОО00000000000000 


О00000000000000000300000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООО0000000000000000000000000000000006-20000 
worker watch queue( ) ПЗОО000000000000000000000000000 
00000006-21000 


00006-21 worker watch queues ( )ПП 


def worker watch queues(conn, queues, callbacks): == 


while not QUIT: 实现 优先 级 特性 要 修 


раскед = conn.blpop (queues, 30) 4 改 的 第 一 行 代 码 。 
if not packed: 
continue 实现 优先 级 特性 要 
修改 的 第 二 行 代码 。 


name, args = јѕоп.1оайѕ (раскеа[1]) 

if name not іп callbacks: 
log error ("Unknown callback %5"%пате) 
continue 

callbacks [папе] (хагаб) 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000----000 
ОДООООО00000000000000000000000000 


ОДОД0АУБУДООООО000000006їєнабОДОДООДОДОВезачерр00 
Дрвебуд0Кеаї о ОДООООДО00000000000000000000000000 
0000210000могкег watch queues( ( )УДОПОВезачер 000000 
ОДОД00000Ач5УПО0С000000000000000Кев5айерор 


6.4.2 [ПЦ 


ОДОДООО0ОД000000000000000000000000000000000000000 
UUU00000000000000000000000000000000000U0000UUUFake 
cameUuuuUU000 0000” О000000000000000000000000000000 
ОДОООО000000000000000000000000000000000 


О000000000000000000000000000030000000000 


e ООООД0ОДОО0О00ОДОО00000000000000000000000000000000 
ОДО000000000 

e ООООДОДОО0000000000000000000000000000мп.1ер00000 
ОДООО00000000000000 

e ООООО0ОДОДОО0ОДОДООД0О000000000000000000000000000 
ОДООО0О000000000000000000000000000000000000000000 
ОДООО00000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОДООО00000000000000000000000000000000000000000000 
ООО000000000000000000000000000000000000006.20000000 
ОДООО00000000000000000 


О00000025ЕТ ачемерпобдодроО0000000004000/50М00004 
ОДООООД000000000000000000000000000000000000000000000 
ООД000019000000000000000000000000000000128009100000 
ОДОДООО00000000000000000000000000000000000000000000 
О0000000000000000000000000000000000000000000006-220 
ОО000000000000000000000000000000000000000000000000 
OOU 


00006-22 execute Татег()| 


生成 唯一 标识 符 。 x 


准备 好 需要 def execute later(conn, queue, name, args; delav-0): 
和 队 的 任务 identifier = str(uuid,uuidd4()) <q 
© 


延迟 执行 这 if delav => Dg 
{> 


个 任务 conn.zadd('delayed:', item, time.time() + delay) 
MER о else: 


item = json.dumps([identifier, queue, name, args]) 


conn.rpush('queue:' + queue, item) « 
返回 标识 符 。 一 > return identifier 


立即 执行 这 个 
任务 。 





О0000000000000000000ехесиёе Таќег ( ) П000000000000 
О000000000000000000000000000006-1000000000000000000 
000000 


delayed: 一 2861 


Г88614877-...", "medium", 


'send sold етаїї", (...Jf 1331850212.365 


["6сббе812-...", "medium", 
'send sold email', [...]] 


1332282209.459 





06-10  ДОДОО0000000000 





урвеаї  ПОДООООООДОО000000000000000000МІХОООДО0000 
ОДОДОО0000000000000009МІХОДООДООООДОООДОО000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
6-23ПОД000000000000000000000 


00006-23 ро11 диеше()00 





def poll queue (conn) : 获取 队列 中 的 
while not QUIT: 第 一 个 任务 
解码 要 被 执行 item = conn.zrange('delaved:', 0, 0, withscores=True) ы У 
的 任务 => if mot item or item[0] [1] > time.time(): 队列 没有 包含 任何 任务 ， 或 者 
рез 2 time.sleep(.01) 任务 的 执行 时 间 未 到 
楚 它 应 该 被 推 continue š ці Я 
人 哪个 任务 队 
列 里 面 | еш = itemTo] [0] | | | 
Ħ identifier, queue, function, args - json.loads (item) 
locked - acquire lock(conn, identifier) < 为 了 对 任务 进行 移动 ， 
获取 锁 失 败 ， - if not locked: 尝试 获取 锁 。 
跳 过 后 续 步 又 continue 
并 重 试 。 if conn.zrem('delayed:', item): 将 任务 推 入 适当 的 任务 
conn.rpush('queue:' + queue, item) 队列 里 面 。 
release lock(conn, identifier, locked) «ноз 释放 锁 。 


0000006-2300000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОООД000000000000000000000000р0 t t_queue ( ) ДООД0000000 
UUU000U0000000000adaptive тетоаррроооооооооооооооооо 
ОДООООООО00000000000000000000000000000000000000000 
100000000000000000000000000000000 


00000 


ОДООО0000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО00000000 


ООО000000000000000000000000000000000000000000000 
ОДО00007"000070"00000"0"0000" ОЗОДОДОДО000007"0000000 
О"О"ОО00000007"0" 00000000" ОЗОДОДО00000001 "high - 
delayed", "high", "medium-delayed", "medium", "Том - 
delayed", "Том" | 00000могКкег watch queues ( ) 00000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUU 


О00000000000*000000000000000000000000006РОЅНО000 
ООАРОЅНОПО0”О00000000000000000000000000000000000000 
О00000000003000000000000000006РОЅНО0000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ООДОО000000000000000000"0000000000000000070000 


DO000000Python00000000000000000000000000 
https://github.comy/josiahcarlson/rpqueueUUUUUUURPQueueODD 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUU 


DU000ePUBw.COMUNUUUePUBw.COM (00000 
UUUUUUUUUUUU 


6.5 ПОП 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUZ 
ПИ ризћ messagingUUUUUUU0UUUUUUUUUUUUUUUUUUUURedisb 
ООДДОД0000ПРУВІ15Н0005085 СВІВЕДООООООЗОДОДОД0О0000000 
00000 °00000000027770ри!! messagingD00000000000000000 
UUU00UmallboxDU000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
PUBLISHUUUSUB9SCRIBEDUDDU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
Дробр0000Веаї  ПРУВІ 15Н0005085СВІВЕПОДООООДОДОД000000 


ОДБООД000000000000000 


6.5.1 000000000000000 


Redis ППОООДОО00000000000000000000000000000000000 
ОДООООД0000000000000000000000000000000000000000000 
Кеа ПРУВІ Т5НО00585 СВІ ВЕДООООДООДОООДООО0О0О00000000 
ОО00000000000000РОВЕІ5Н00050В5САІВЕПОП0000000 


О000000ғаке батеППППҒаке сагадерорроробопородоо 
ОДООООО000000000000000000000000000000000000000000000 
О0000000000000000000000000Аеаіѕ=В0000%еооо0000000000 
О000000000Аеаіѕ000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
D0000000000000HTTP 1.1000000000000000М/е600000000000 
ООО000000000000000000000000000000000000000007к1ІМ000 
Орр002000000000020000000 


ООО0000000000000000000000000000000000000006.4.10 
ООО000000000000000000000000000000000000000006-12000 
ОД/аск45100000000000000 


mailbox:jack451 —— N c V list 


(sender':'jill84', 'msg''Are you coming or not?', 'ts': 133066...) 
{sender mom65 ,msg:Did you hear about aunt Elly?', ...) 






06-11 |аска510000000000000/10000000/аск45100000 





ОДООООО000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 
РОЮВІТ5НОД05УВ5 СВТ ВЕОДООООООООДООООО0ОД00000000000000 


0000000000000000000000Redis000000000000000000000000 
D00000000Redis00000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ПОРУВІ Т5НООО5УВ5ССВІВЕПООО 


6.5.2 0UUUUUUUUUUUUUUU 


ОООО0О00000000000000000000000РОВІТ5НОПО050В5СЕАТВЕ) 
UUU000000000000000000000000000000000UUURedisD 
PUBLIsHDUDUU>UB>CRIBEDOUUUUUUUUUUUUUUUgroup спа#000000 
ОДОДОД0000000000000000000000007000000000000000700000 
ОДООО0000000000000000000000 


UU000000000UFake вагадепрооооооооооооооооооооооо 
ППППППЕаКе Carage0UUUUUUUUUUUUUUUUUUUUUU000000000000 
ОДООООО00000000000000000000000000000000000000000000 
О000000000000РОВЕІ5НО0050В5САІВЕПОО000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
IDUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUIPUUUUUUUUOUDDU 
UUUUUU00000UIPUU6-120UUU00000000UUUUUU 


сћа 827 


zset 











јазоп22 5 
је 24 6 
сћа 729 zset 





michelle19 ı 10 
jason22 ! 10 





jennv530 i 








zset 





seen:jason22 


827 | 5 
729 ' 10 








seen:jeff24 zset 
x 827 8 





06-12  ОДООООО0000000000000000сбає 25 ЕТООООДОООО0000000000000000100000 





UUUUUseen 25ЕТООООООО00000000190000000000000000000010 





006-1200000јаѕоп22је#240000сһа:8270000000јаѕоп22 


0060000000500 


1000000000 


ООДОО0000000000000019000000000000000000000000000 


00006-24 create спає( )ПП 


ООДОД0000000000000000000000000100000000000000000000 
ОООД00000000000000000000000010000000000000000001000 
ОДОООО000000000000000000000000000000000000000000000 
Обр000000000000006-2400000000000000 


def create chat(conn, sender, recipients, message, chat id-None): 
chat id = chat id or str(conn.iner('ids:chat:')) < 一 获得 新 的 群 组 ID. 
н . Чр -h ` дех 
recipients.append(sender) | 创建 人 由 用 户 和 分 值 组 成 的 f 
recipientsd = dict((r, 0) for r in recipients) 典 , 字典 里 面 的 信息 将 被 添加 到 有 


| 序 集合 里 面 。 
pipeline = conn.pipeline (True) 
і і ' „1 і ** ірі <a Š ыс £ 
ی و ت‎ ава ТІЛІ 
° БАР ра 33 фрі q 2 BE 
pipeline.zadd('seen:' + rec, chat_id, 0) H 初 如 化 已 读 用 | EMEA A ж 
ріреііпе.ехесчиғе() AFRE- 合 里 面 。 
return send message(conn, chat id, sender, message) < 发 送 消息 。 


create сһаї ( ) 0000091с+ ( ) П0000000000007777 
Поепегаќог ехргеѕѕіопро00000000000000000000000000000 
О004АРоП000000000000000000000000 


UUUUUUUUUUU О000000000000000000000000000000 
Руєпопр00000000000000000000000000000000000006-24000 
ОООД0000000000000000000іп-1і перо ОДО00000000000000000 
ОООД00000Л7000000000000000000Р'ерг// пд. Б2/ТТКОД 


200000 


ПООО00000000000000000010000000000000000000000 
Uchat s messages 25ЕТ0ПОО00000000000000000000000006.2 
О00000000000000000000006-250000000000000000000000 


00006-25 send message()DD 


def send message(conn, chat id, sender, message): 
identifier - acquire lock(conn, 'chat:' 4 chat id) 
if not identifier: 
raise Exception ("Couldn't get the lock") 
Суу: 


mid = сопп.іпсг('ійѕ:' + chat id) 

ts = time.time() 

packed = json.dumps(( з 
rid': mid, 筹备 行 发 送 
Пре Ев; 的 消息 。 


'sender': sender, 
'message': message, 
}) 
conn.zadd('msgs:' + chat іа, раскеа, тіа) 将 消息 发 送 至 


finally: те 
release lock(conn, 'chat:' + chat id, identifier) 组 。 


return chat id 


ОДООООО000Д000000000000000000000000000000000000000 
О00000000005епа теѕѕаде ( ) П0ОП00000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
[IRedis[ ор0000000000Кеаї ДООДОООДОО0О000МАТ СНОМОЇ ТІП 
ЕХЕСОДОООДОООДОО00000000000000005епа теѕѕаде ( ) П0000 
ОДО0000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000 


300000 


ПО0000000000000000000000000000002КАМЕПОО0000000 
ІОО000001РО00000001р00000000000000000000 
2КАМСЕВҮЅСОКЕПООООО00000000000000000000000000000000 


ОТОрОДООДОО0О00000000000000000000000000000000000000 
0000000000006- 2600000000000000000 


00006-26 fetch pending тез55аде5 ()ПГП 


def fetch pending messages(conn, recipient): 


seen = conn.,zrange('seen:' + recipient, 0, -1, withscores-True) 获取 最 后 接 
的 消息 
pipeline = conn.pipeline (True) раза 
c 
for chat id, seen id in seen: зб 
pipeline. zrangebyscore ( ا‎ 
imsgs:' + ghat id, seen 14%1, 'inf') 木 读 消息 。 
chat info = zip(seen, pipeline.execute ()) <— 
一 l 这 些 数据 将 被 
for і, ((chat id, seen id), messages) іп enumerate (chat info): 返回 给 函数 调 
if not messages: ТҰЗ 
сопсіпие У 
messages [:] = map(json.loads, messages) к 
seen id = messages l-1) (114!) 使 用 最 新 收 到 的 消息 来 更 新 
conn.zadd('chat:' + chat_id, recipient, seen_id) HETES., 
min id = conn.zrange ( 找 出 那些 所 有 人 都 已 经 阅 
'chat:' + chat_id, 0, 0, withscores=True) 读 过 的 消息 。 
ерте ine. зада ('зееп:' + гесіріепі, chat id, seen id) < 更 新 已 读 消 息 有 
if min id: FEA 
pipeline. zremrangebvscore ( | 子 集合 。 
'msgs:' + chat id, 0, min іа[0] (11) 清除 那些 已 经 被 所 有 
chat_info[i] = (chat_id, messages) 人 阅读 过 的 消息 。 


pipeline .execute() 


return chat_info 


ОДООО0О000000000000000000000000000000000000000000 
ОО0000000 


40000000000 


ОДООД0000000000000000000000000000000000000000000 
ООДОО0000000000000000019000000000000000000000000000 


ОДДО00019000000000000000000000000000000000000000000 
О00000000000010000006-2 7 П000000000000000000 


00006-27 join сһа+() 05 


def join chat(conn, chat id, user): 


е message id = int(conn.get('ids:' + chat id)) а 
将 用 户 添加 到 群 ss жи 取得 最 新 群 组 消 
组 成 员 列 表 b pipeline = conn.pipeline (True) 
ERRIRE M P pipeline.zadd('chat:' 4 chat id, user, message id) 息 的 ID。 


ріреїіпе.хаді('єсеп:!' + user, chat id, message id) 4— 
pipeline .execute() 


将 群 纽 添加 到 用 户 的 已 读 刻 表 里 面 。 


join спа () ОООООДО0О0000000000000000000000000000 
ОДО00000 


ООДОО0000000000000000000000000000190000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООЗООДОО00000000000000000000000000000000000000000 
000000006-280000000000000000000 


00006-28 leave сһаҰ()ГП 


def leave chat(conn, chat id, user): 
pipeline - conn.pipeline (True) 


查找 群 组 剩余 pipeline.zrem('chat:' + chat id, user) 从 群 组 里 面 移 除 
E rE pipeline.zrem('seen:' 4 user, chat id) | 给 定 的 用 户 
成 员 的 数量 。 pipeline.zcard('chat:' 4 chat id) н 


if not pipeline.execute() [-1]: 
pipeline.delete('msgs:' 4 chat id) 


7 AL Ç 
pipeline.delete('ids:' 4 chat id) 删除 群 组 。 
找 出 那些 已 经 被 pipeline.execute() 
所 有 成 员 阅 读 过 else: 删除 那些 已 经 被 所 有 
的 消息 。 т oldest = conn.zrangel 成 员 阅 读 过 的 消息 。 


'chat:' 4 chat id, 0, 0, withscores=True) 
conn.zremrangebvscore ('msgs:' + chat id, 0, oldest(0j(1)) +— 


ОДООД000000000000000000000000000000000000010000 
00 


ОДООО0000000000000000000000000000000000000000000 
О00000000000000000000000000000РОВЕІ5Н00050В5САІВЕр 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООДОО0000000000001000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000 


О0000000000000000000000000РОВЕІ5Н00050В5САІВЕПП0 
О00000000000000000000000000000000000К&еаіѕ00000кеу 
nameUUUUUUU 


D000ePUBw.COMNUUUePUBw.COM ДОООП 
UUUUUUUUUUUU 


6.6 ПОКеаіѕ 0000 


ОДООООО0ОД000000000000000000000000000000000000000 
ОООД00000000000000000000000000000000000000000МР9500 
Ѕатрар1000000раєһо00000000000000000000000000000000 
О00В5упс ПОДОООДООДОД00000000000000000000000000000000 
ОДОДОДОВісТоггепірОО0000000Орагіта ОДОрООД00000000000000 
ОДОООО000000000000000 


ОООО00000000000000000000000000000МР505атбадрооо 
ОДОООО000000000000000000000000000000000000000000000 
ООДОО0ОО00000000000В5упсеоОООООО00О0000000000000000000 
П0000000000геѕитеђ0кѕупеО000000000000000000000000 
О0000000АѕупеО00000000000000000000000008ВіТоггеп 000 
ОДООООО000000000000000000000000000000000000000000000 
UUUUBHTorrentUUUUUUUUUUUU00000000000000000UBit Torrent] 
0000 


О00000000000003000000000000000000000000000000000 
О00000000000000Кеаіѕ=р00000000Аеаіѕ000000000000000000 
О0000000000000Аеаіѕ=00000000000000000000000000000000 
ОДООООО00000000000000000000 


6.6.1 О00000000000 


ОДО05000001Р600000000000000000000000000рбаке Gamell 
О0000000000000000000000000000000000000000000ғаке 
СатеПО0000000006Вро0000000000000000000000000000000 
ОДООО000000000000 


Ор00500000000Раке ватепрроооооооооооооооооооооо 
01 0б00000000000000100000000000007 ЗООО0О000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000000000000 


ОО00000000000000МарАеаисе #П00000000000000000000 
О000000000000МарКеаисео00000000000000000000000000 
ОООО000000000000000000000000000000000001РО0000000 
[lookup ќабіерОПРупопрО0000000000000002000000001Р000 
О000000000Аеаіѕ000000000000000000000000000МарКедџисе 
О00000000000000000000Аеаіѕ0000000МарКеаисер0000 


О000№Р5П5атраП00000МарКедисеПо00000000000000 
Fake СатербО000000000000000000000000000000000000 


ОДО00000000 


О000000000000000000Аеаіѕ$=000000000000000000000000 
ОО0000000000000000000000000000000000010000000000000 
Дррркеаї о 0001000000000000000000000000000000000000 
UU000000000000000300000000000RedisUUUU0300UUUUUUUUUDUD 
О00000Аеаіѕ=000000000000000000000000000000000000000 


О0000000000000000000100000000000001000000000000 
О00000000000000000000000000000000000000000000Кеаіѕ0 
О0000000000000000350 00000000010920000000090920000000 
ОДООООО0000000000000000000000000000000000000000 
Кеа 5 000 


00000005. ЗОООООД00000000000ІРОООООООООДОД00000000 
ООДОО0ОО0О0000000000000000000000000000----О0001РООСО 
ОДООО00000000000000 


173.194.38.137 2011-10-10 13:55:36 achievement-762 


ОДООД0000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
Дрр0веаї 00000006-29000000000000000000000 


00006-29 ПОООО0000000000000000000000000 


aggregates = defaultdict (lambda: defaultdict (іпё)) 





tE £ A Hh Ж 
def dailv countrv aggregate(conn, line): Ж 
о if line: Pra rt. 
提取 日 志 行 中 line = line.split() 
的 信息 。 ip = line[0] 
L day = line[1] 
country = find citv bv ip local(ip) [2] <- 根据 IP ЈЕДЕ 
对 本 地 聚合 数据 р aggregates [day] [country] += 1 判断 用 户 所 
ВИТЕ, звала 在 国家 。 
for day, aggregate іп aggregates.items(): 
conn.zadd('daily:country:' + дау, **aggregate) — 


del aggregates [day] 





当天 的 日 志文 件 已 经 人 处理 完 毕 ， 将 
聚合 计算 的 结果 写 人 Redis 里 面 。 


daily countrv aggregate( ( ) П0000000000000000000000 
ОДООООО00000000000000000000000000000000000000000- — 
О00000Аеаіѕ= 0000000 


6.6.2 O00000 


ОДООООО000000000000000000000000000000000000000000 
ОООб000000000000000Веаї  Д0000000К6.5.200000000000000 
ОООД0000000000000000000000000000по0бійсаєіоп ДОДО000000 
ОДООООО000000000000000000000000000000000000000000000 
ООО000000010000000000000000000006-ЗО0000000000000000 
ОДООО00000000 


00006-30 сору 1095 to гед15() 


def сору 10945 to redis(conn, path, channel, count-10, ыға un 
- 一 ”一 1 а Р 

limit=2**30, quit when допе«-Тгиє): 创建 用 a 3! і 

bvtes in redis = 0 发 送 消息 的 群 组 。 
waiting = деаце() 





create chat (conn，'Source'，map(Str，range(ccunt))，''，channel) < 
count = str (count) 
tor logtile in KE A ann) £ | =— 遍历 所 有 口 
full path = os.path.joinipath, logfile) енй 
志文 件 。 
fsize = os.stat(full path).st size 
while bvtes in redis 4 fsize » limit: 如 果 程 序 需 
е ни channel, waiting, count) 要 更 多 空间 ， 
khas y: ~ ЈЕ 
bvtes іп redis -= cleaned Ж 清除 已 
else: 经 处 理 完毕 
time.sleep(.25) 的 文件 . 
with open (full path, 'rb') аз inp: 
т block = ' ' 将 文件 上 传 
н. ШЫ! ` < 
парео while block: = Redis 
者 ,文件 block = inp.read(24417) 
已 经 准备 conn.append (channel+logfile, block) 
就 绪 。 


> send message (conn, channel, 'source', logfile) 
қ 记录 的 Redi 
bytes_in_redis += fsize | PORN Кой 内 存 占 
waiting.append( (logfile, fsize)) 用 量 相关 信息 进行 更 新 。 
所 有 日 志文 件 已 经 处 
理 完毕 ， 向 监听 者 报 


if quit when done: 


send messaqe(conn, channel, 'source', ':done') 
= 告 此 事 。 
while waiting: 
cleaned =  сіеап(сопп, channel, waiting, count) і Ж 
if cleaned: | а š 在 工作 完成 之 
bvtes in redis -= cleaned 后 , 清理 无 用 的 
else: 日 志文 件 。 
time.sleep(.25) 
def clean(conn, channel, waiting, count): 
if not waiting: 
return 0 对 Redis 进 
wh = waiting[0] [0] | | 行 铺 理 的 
if conn.get (channel + wð + ':done') == count: 5 
conn. delete (channel + w0, channel + wO + ':done') 详细 步骤 。 
return waiting.popleft() [1] 
return 0 


О00000006еаіѕ$000сору_1095_ to геді5 () 000000000000 
D000000000000000000000Redis0000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О0000 


6.6.3 00000 


ОДООООО00000000000000000000000000000000000000000 
О0000Аеаіѕ$В0000000000000000000000000000000000000000 
О0000000000000000000000000000000006-310000000000000 


00006-31 process 1095 from геаїѕ( ) 0 


def process 1095 from redis(conn, id, callback): 


while 1: 获取 文件 
fdata = fetch pending messages (conn, id) < 列表 。 
for сь, mdata in fdata: 


for message in mdata: 
logfile = messagel'message'l 


if logfile == ':done': 所 有 日 志 行 已 
return 经 处 理 完 毕 。 
elif not logfile: 
continue 








block reader - readblocks 选择 一 个 块 读 取 
if logfile.endswith('.gz'): | 
遍历 日 志 行 。 block reader = readblocks gz f block reader ) ; 
b for line in readlines(conn, chrlogfile, block reader): 
callback(conn, line) 将 日 志 行 传递 
ташкай | > callback(conn, None) 给 回调 函数 。 
缓存 。 conn.incr(ch + logfile + ':done') 日 志 已 经 处 理 完毕 
lT Р, 
if not fdata: 向 文件 发 送 者 报告 
time.sleep(.1) 这 一 信息 


О0000"0Веаї ророр000" О0000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000 


6.6.4 ППД 


ОООО000000000000000десоаеррророб0000000000000000 
00000006-3200Огеад lines ( ОДООО0О000000000000Кеаї 000 
ОДОДО000000000000610ск iterating са!раск000000000000000 
D000000000000000000line бгеакорООООООО0000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДОДОРУєпопООООООДОООО0О0000000000000000п773 па ( ) 000 
split 0) ОДОДО00000000000 


00006-32 readulines()[] 


def readlines(conn, key, rblocks): 


out = '' 查找 位 于 文本 最 右 端的 换 
РР for block саа key) : 行 符 ;如 果 换 行 符 不 存在 ， 
到 | 一 | out += oc М find IR [8]—] _ 
换行 符 。 posn = out.rfind('\n') 那么 rfind() 返 回 -1。 
š 5 if роѕп >= 0: 
suna ГР for line іп ocut[:posn].split("Nn'): = М 
бена) yield line + "п! a ИЯСЕ 
З] Н 17. out = out [Posn+1:] < 保留 余下 的 回 每 个 行 。 
所 有 数据 块 已 经 > 16 not block: т 
"енн ü Е yield out 数据 。 
处 理 完 毕 。 ргеак 


ОООДОДОО00000000000000000000000 read Lines ( ) 000000 
ОД00000000 


ООуіета000000  00006-32р)р0000000Оуіетаб0ПРуєпопі) 
ПОбу 1етадроророобопорбоо0броророророробороборорборооо 


ОДОД0000000000000000000000000000000000000РУСпОПООО 
D00000000http://mng.bz/Z2b10 


read lines ()000000000000000Огеадотоскз ОП 
readblocks 92 ( ) ПООКеаі0000000000геаар1оскѕ ( ) 000000 
О0000000000000геааріоскѕ 92 ( ) О000000921РООО0000000 
ООО00000000000000000000000000000000000000000006-33р 
ПОгеаар1оскѕ ( ) 00000000 


00006-33 readblocks ( ) 000 


def readblocks(conn, key, blocksize=2**17): 尽 可 能 地 读 皮 更 多 数据 ， 
lb = blocksize 直到 出 现 不 完整 读 操作 
роз = 0 (partial read ) 为 止 。 
while lb == blocksize: 
block = conn.substr(key, pos, pos + blocksize - 1) a 获取 数 
yield block HF- шк | 据 块 
1р = len(block) = 
pos += lb 做 准备 。 


yield '' 


readb locks ( ) П00000000000000000000000000000000000 
000000000—==000000000тетсасһеароб0000000000000000 
О000000Кеаіѕ00092іро00000000000006-34000 
readblocks 92 ( ) 0000000 


00006-34 readblocks 92 () ІП 


def readblocks gz(conn, Кеу): 


inp = ' 9 5 | А 
десодег з Мопе 从 Redis 里 向 

i 读 入 原始 数据 
for block іп readblocks(conn, key, 2хх17): ЖАП о 


if not decoder: 
inp += block 








trv: 
ЖЕ IDES] ј= Vixifikebiost: 
f raise IOError ("invalid gzip data") 分 析 头 信息 以 便 取 得 被 压缩 
З = 29 қ 
flag = ord(inp[3]) “ 的 数据 。 
if flag & 4: 
і += 2 + ord(inp[i]) + 256tord(inpli41)) 
if flag & 8: 
і = іпр.іпӣех ('\0', 1) + 1 
if flag & 16: 
і = іпр.іпдех ('Х0:, 1) + 1 
if flag & 2: 
i += 2 
if і > len(inp): 
raise IndexError ("not enough data") FEF ER УЗА A 
except (IndexError, ValueError): 并 不 完整 。 
continue 
else: 
block = inpli:) si ġe B 
аа | 已 经 找到 头 信息 ， 准 备 
decoder = zlib.decompressob] (-zlib.MAX WBITS) 好 相应 的 解压 程序 。 
if not block: 
continue 
; 所 有 数据 已 经 处 理 完 
if not block: ы тени = 
yield decoder.flush() | 毕 ， 向 调用 者 返回 最 
break 后 剩 下 的 数据 块 。 
yield decoder.decompress (block) نل‎ 向 调用 者 返回 和 解 
压 后 的 数据 块 。 


readbLocks gz()D0000UUUUUUUUgzipUUUUUUUUUUUUUDUD 
О0000000000000000000092іро000000000000001/201/500000 
О0000000000000000000000000000000000602ір2012та0х20000 
О000000000000000124012ор05парруПОчіскі20000000000000 
О000000000092000000000000092000000000000000СРОП0000 
UUUUUUUUU 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


6.7 ПД 


ОО0000000006000000000000000000000000000000000090 
ОДООД0000000000000000000000000000000000700000000000 
ОДООД000000000700000 


ОДООО00000000000000МАТЄНООДОООО0ОО000000000006.20 
UUUU000000000RedisUUUUUUUUU0U00000000000000000000D0UD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
ОД000004.600000000000006.4.20000000000000000000000 
00 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUURedisUUUUUUUUUUUUUUUUUUU0U00000000000000000000D0UD 
О0500000000000000000000000АеаіѕВО0000000000000000000 
000000 


D00000000000000Redis0000000000000000000000000D0000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUU0U0000000000000000000000RedisU000000000000D00DD 


® 0000002010))00ПРагасебоок ПОДООО"О000000Венсу White 
ОООДОО000000"00000000ОРасебоокрОДОООДОДОВенсу White0 
Ор000000000000000000000005абигаау Night Live IDUSNLI 
一 一 ULUUU 


© 000000000000000URedis00000000000000002>0000000000 
ОДООД000000000001.000000000000000000000 


Э ПППППРИВІ Т5НО05085 СВІ ВЕПООООДОООПОДОДООО00000000 
ОДОДОО0000000000000Кеаї ПООООООО00000000000000000000 
UUUUUUUUUUUDU 


@ MapReduceUUUMap/Reduce0UUGoogleUUU0000000UUUUUUD 
UUUUUUUUUUUUUU 


D000ePUBw.COMUNUUUePUBw.COM ПОД 
UUUUUUUUUUUUU 


070 000000000 


ПО0000 


e ПОАКеаіѕП000 
UUUUUUUUU 
• 000000 

e 000000 


UUUU00000000000000000000RedisU00000000000000DD 
Кеа ПДОДОДОДООО0000000000000Веаї  ДОООООООЛИДОГИЙ 
Пзеагсһ-разеа ргобіетО00000000000000000000000000000 
UUUUUUUUUUUDU 


UUUU000000URedisUUUUUUUUUUUUU000000000000000000DD 
UUUU000000000000000000000000UUUUUUUUUUUUUURedisUDDUD 
UUUU000Uad-targeting епатепрооооооооооооооооооооооооо 
UUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU00000000000000000000000000UUUUURedisUDODUDODDODD 


ПррђеРовм. сОМІДДДерРувм. СОМ ПОД 
О000000000000 


7.1 ППВеа!5 || 


ОДООООО000000000000000000000000000000000000000000 
ОООД000000000000ЦіпихУупіхо0О5 ХПо геро000000000 
WindowsUUUUUUUUUUU00000000000000000000000000UUUUUUD 
ОДОООО00000000000000 


D00000000000000000WebOQ000Web0000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О0Аеаіѕ0000000000000000000000000000000 


ОО0000000000000ғаке сагадерорророОб00000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
RedisUU00000000000000000000000UURedisU00000000D0000U0UD 
ОДО000000000 


ОДООО0000000000000000000000000000000000000000000 
О0000 


7.1.1 000000 


ОДООД000000000000000000000000000000000000071/101 
Оіпаехіпд ДОДОДОДО0000000Л70/0іпметеа іпаехеѕ000000000 


ОДОООО000000000000000000000000000000000000000000000 
О00000000000000000000000000Аеаіѕ$=0000000000000Аеаіѕ00 
О0000000 20000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
00000000001ога of the ringsUU00UdocADOUUUUDO0Ulord of the 
dance0UUUUdocBUUUUURedisUUUiordUUUUUU0UUUUUOUUUOUUUD 
docAUdocBUUUUUUUUUU000UUdocAUdocBUUUUU0UUU00Uiord007-1 
UUUUUUUUUUUUUUUUUUUUD 


ind:lord set ind:of set 
docA docA 
docB docB 
ind:the set ind:rings set 
docA U docA J 
docB 
ind:dance set 

U docB ) 


07-1 ПаосАПаосВППППППП 


























D000000000000000000000Redis0Q000000000000000000000 
UUUUUU 


10000000 


ОДООООО000000000000000000000000000000000000000000 
INI Прагзіп9 Д00/ Пюкепігашоп ООООООДОООО000000000Л// 
ОєокепрОО00000000/ мога 00 


О000000000000000%еюро00000000000000000000000000 
О00000000000000000000000000000000000000000000(° 0000 
ОООО0000000000000000000000000000000010а0о0000 


О00000000000000000000057705ор мога дроб000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООД000000000000007-200000000000000000000000 


BX: 


In order to construct our SETs of 
documents, we must first examine 
our documents for words. The 
process of extracting words from 
documents is known as parsing 
and tokenization: we аге 
producing a set of tokens (or 
words) that identifv the document. 


标记 化 


标记 化 之 后 的 内 容 : 


and are as construct document 
documents examine extracting first 
forfrom identify in is known must of 
ororder our parsing process 
producing set sets that the to 
tokenization tokens we words 


移 除 非 用 词 


移 除非 用 词 之 后 的 内 容 : 


construct document documents 
examine extracting first identify 
known order parsing process 
producing set sets tokenization 
tokens words 


N 











07-2 ООДОДОД00000000000000000000 


О00000000000000000000000000000000000000000000000 
D000000000000000007-10000Dhttp://www.textfixer.com/ 
геѕоигсеѕ/000000000000000000000000000000000000 


00007-1 П00000000000000000 





STOP WORDS = set('''able about across after all almost also am among 
an апа any ате as at be because been but by can cannot could dear did 


do does either else ever every for from get got had has have he пәк 


hers him his how however if in into is it its just least let like 
likelv mav me might most must mv neither no nor not of off often on 


only ок other our own rather said say sava she should since so some 


than that the their them then there these thev this tis to too twas us 


将 文档 中 wants was we were what when where which while who mi why will with 
包含 的 单 would yet you vour'''.split()) Ma 义 好 从 http://www. 
词 存 储 到 WORDS RE = хе.сотрі1е (" [а-2'] {2,}") несла 
баж def tokenize EGE EEE 4 的 非 用 词 。 
ТШ» l> words вені ананы 
RX for match in чаан КЕ. е НОВО ВВ» 10мех ()): 

word = match.group().strip(' 别 除 所 有 位 于 单 
档 中 包 if Tn s= 2: бийкар ан МЕТЕ 
含 的 所 words . add (мога) 长 的 单词 AJA 
有 单词 。| Г> return words - STOP WORDS | і 单 引号 。 
返回 一 个 def index document (conn, docid, content): | 对 内 容 进 行 标记 化 处 理 ， 并 
集合 ， 集 words = tokenize (content) < 一 取得 处 理 产生 的 单词 。 
合 里 面包 pipeline = conn.pipeline (True) 
含 了 所 有 for мота in words: 将 文档 添加 到 正确 的 反 向 索 
被 保留 的 pipeline.sadd('idx:' + word, И 引 集合 里 面 
不 是 非 用 return lenipipelins.execute()) 4 
词 的 单词 “| 计算 下， 程序 为 这 个 文档 添加 了 多少 

ijm É 


| 个 独一无二 的 、 不 是 非 用 问 的 单 辣 。 


00o РО пероробо00000000007-1000000000000000000000 


аосАПаосворорробоООТо га0гіп95 дапсебдборД0000000000 
lordfjofijthefjringsildancef ПП 


ОДО000000  ООООО000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ООД00000)5О0 МОООООДООДОО00000000000000005ЕТ0000000000 
О000000000іпаех document ( ) П0000000000000000000 


ОДООД0О000000000000000000000000000000000000000 
20000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
D000000000000300000000000RedisUSINTERDDDSINTERSTORED 
ОДООООО000000000000000000000000000000000000000000000 
000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
UUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UOOU00URedisUUDUSUNIONDUUUDSUNIONSTOREDODDO 


ОДООООО00000000000000000000000000000000000000000 
дррррвеаї О501РЕО5ОІРЕ5 ТОКЕДООООДООДОДО0000 


Д0р0веаї орДООО0000000000000000000000000000000000 
7-2 О00000000000000000000000000000000000000000000000 
ОДД0000000030000000000 


00007-2  ОДООООД000000000000000000 





设置 事务 流水 线 ， 确 保 每 个 调用 都 能 创建 一 个 新 的 临时 标 
获得 一 致 的 执行 结果 。 RIT o 
给 每 个 单词 def set common(conn, method, names, ttl-30, execute-True): 
ји l-'idx:' ід = str(uuid.uuid4()) а 
前 级 。 pipeline = сопп.ріре1іпе (True) if execute else сопп 
= names = ['idx:' + name for name in names] 


У Redis ТЕЖ 
来 自动 删除 这 


个 集合 。 


>  pipeline.expire('idx:' + id, tti) 集合 操作 设置 
if execute: р Қы dab aa 
pipeline ..execute() 相应 的 参数 
return id 4— 将 结 会 以 16 РӘ жна 
将 结果 集合 的 ID 返 BE 实际 地 执行 操作 。 
回 给 调用 者 , 以 便 做 
进一步 的 处 理 。 
执行 交集 г def intersect (conn, items, ttl-30, _execute=True) : 
ж З 


getattr (pipeline, method) ('idx:' + id, *патеѕ) й 为 将 要 执行 的 





return set common(conn, 'sinterstore', items, ЕСІ, execute) 





计算 的 辅 

助 函 数 def union (conn, items, ttl=30, execute=True): 

à š return _set_common(conn, 'sunionstore', items, ttl, _execute) 
执行 并 集 计 算 def difference (conn, items, ttl-30, execute-True): 

的 辅助 函数 。 return set common(conn, 'sdiffstore', items, ttl,  ехесиіе) 


执行 差 集 计算 的 辅助 函数 。 


intersect ( ) Пипіоп () 091##егепсе ( ) П0000000000000 
ООО000000000000000000000000000000000000000000000000 
О0000010007-ЗО000000000000030000000051ІҸТЕАО SUNIONI] 
ЗРІРРОДОООД 


ЗІМТЕКА В SUNIONA B SDIFFA В 


À 
and AorB 
B 


П7-3 ПО0000000000000000000000 





ОДООД0000000000000000000000000000000000000000000 
ILU 


300000000 


ОДОООО000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
00 


ОДООООО000000000000000000000000000000000000000000 
UUUUUU00Uintersect () ОООООО0О0000000000000000000-000 
О00000000000000000000000000000000000091+#+#егепсе ()00 
ОДООООД00000000000000000000-000000000000000000000000 


О000000000000000000чпіоп ( ) ОО0000000000і пе гзесЕ ()00 
ОД00- 00000000 - ОСПО00000000000 - ОО000000000000-000000 
000000 


О00000000000000000000000007-З0000000000000000000 
О000000Руєһопо00000000000000000000000000000000 


00007-3 О000000000000 


这 个 集合 将 QUERV RE = re.compile("[+-]?[a-z'][2,)") 1 用 于 查找 需要 的 单词 、 不 
用 于 存储 不 l | 需要 的 单 闻 以 及 同义词 的 


def parse (query) : 


需要 的 单词 。 unwanted = set () 这 个 集合 将 用 于 存储 日 正则 表达 式 。 
b all = [] 前 已 发 现 的 同 义 疗 。 
这 个 列表 将 用 于 存 current = set () < 
вила BUT RÊ I for match in QUERY RE.finditer (query. lower ()): < 遍历 搜索 查询 
word = match.group() 1224 2 
算 的 单词 。 prefix = мохаї:1) | о 
if prefix іп '4-': 有 加 号 前 缀 或 者 


word = мота [1: 


BIRD, MR 
else: 有 的 话 。 


prefix = None 


word = word.strip(''') 
if len(word) « 2 or word in STOP WORDS: 





划 除 所 有 位 于 单 continue 
G. Sp паша. <= дыд 如 果 这 是 一 个 不 需要 的 单 
зе unwanted. add (word) 词 , 那么 将 它 添加 到 存储 不 
过 所 有 非 用 词 。 continue 需要 单词 的 集合 里 面 。 
if current and not prefix: 如 果 在 同义词 集合 非 空 的 情 
将 正在 处 理 的 单 all.append (list (current) } MF, Ш АКАУ 
词 添 加 到 同义词 current = set() ВИНУ 8], ДАВ 
集合 里 面 。 current. add (word) 新 的 同义词 集合 。 
if current: ira y lile та Ба. 
all.append(list (current) ) 把 所 有 剩余 的 单词 都 放 到 最 后 
的 交集 计算 里 面 进行 处 理 。 


return all, list (unwanted) 


ОДООДО0000000000000000000000000000000000000000000 


0000000соппес+Дсоппесїіопа1іѕ соппес ал5соппест 1оп 


UUchatDUU000000000000000000000000000000000UUp гохур 
ргохіе5 (ПП ПП ППТ 
ШШП 


>>> parse" '! 

connect +connection +disconnect +disconnection 
chat 

-proxy -ргох1ев''') 

([['disconnection', 'connection', 'disconnect', 'connect'], ['chat']], 
l'proxies', 'proxy']) 
>>> 


ОДОО00000000000Осоппеседаї 5 соппесє О00000О0000сћа“ 
О000000000000000000000р гохубр гохіез ОДООООД0О00000000 
ОДОДО00000000000----ОПраг5е and search () 0000000000 
parse( ) П000000000чпіоп ( ) 0000000000000000000 
intersect ( ) ПОООООООООООО0000000000091+ ference ()0000 
00000000000007-4000рагѕе апа search( ) 00000000 


00007-4 ПОООООО000000000 


如 果 查 询 语句 只 包含 def parse and search (conn, query, ttl-30): 


5 - Р 对 查询 语句 进行 
PeR 2 all, unwanted = parse (query) <1 е в 
非 用 词 ， яна if not all: 语法 分 析 。 
索 将 设 有 任何 结果 。 return None 
to_intersect = [] 
for syn in all: — 遍历 各 个 同义词 列表 。 


| if len(svn) 9 1: 





如 果 同 义 词 列表 包 to intersect ..append (union (conn, syn, ttl=tt1)) 
` else: Ят Бл H 
含 的 单词 不 止 一 个 ， ER "У 如 果 同 义 词 列 表 只 包含 
那么 执行 并 集 计 算 。 SE аи о | 一 个 单词 ,那么 直接 使 用 
| if len(to intersect) > 1: 这 个 单词 。 
如 果 单 词 (或 者 并 集 计 intersect result = intersect (conn, to intersect, ttl=tt1) 
пи кр. ы else: a (a ЗВУ 
算 的 结果 ) 不 上 上 Га intersect result = to intersectlol 如 果 单词 (或 者 并 集 计算 
那么 执行 交集 计算 。 的 结果 ) 只 有 一 个 , 那么 将 
| ре 它 用 作 交集 计算 的 结果 。 
如 果 用 户 给 定 了 不 需要 的 unwanted.insert(0, intersect result) 
单词 ,那么 从 交集 计算 结果 return difference (conn; unwanted, ttl-ttl) 
里 面 移 除 包 含 这 些 单词 的 return intersect result < 如 果 用 广 没 有 给 定 不 需要 的 单间 ， 那 么 直 
接 返 回 交集 计算 的 结果 作为 搜索 的 结果 。 


文档 ， 然 后 返回 搜索 结果 。 


О0000000000000000рагѕе апа _ѕеагсћ ( ) П000000000100 
О000000010000000000000000000000000000000ғаке Garagell 
О0000000000001паех_доситепё ( ) П0П000000000000000000 
parse апа search( ) 000000000000 
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UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 一 一 UUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


Дрро0з300000000Веаї 508 ТОООООООО0О000000000000000 
ППППППППЕаКе СагадеподоробО0О00000000000000000000000 
ОО000000000000000000000000000000010007-400000000000 
П000000 


kb'doc2/6 一 hash 


id 276 
created 1324114412 
updated , 1327562777 


title Troubleshooting... 





07-4 ОООО000000000 





О0007-Ф00000000000000050АТ00000000000000000000000 
ПППППрагзе and ѕеагсћ ( ) ОДОДООООО00О00000000000000000 


ОДООООД000000000000000000000000000000000000000000000 
ПОО0000000000000007-50000000000000000000000000000 


00007-5  ОПОДОООД0О000000000000000000 


用 户 可 以 通过 可 选 的 参数 来 传人 已 有 的 搜索 结果 、 | 








буку фа 指定 搜索 结果 的 排序 方式 ， 并 对 结果 进行 分 页 。 
-$ ра def search and sort (conn, query, id-None, ttl=300, sort="-updated", 
行 start=0, num-20): 
升序 排序 还 是 降 аш а н ża ji it «ши 告知 Redis， 排 序 是 以 数值 方式 
ы. ру - ы ашаған sort 进行 还 是 字母 方式 进行 。 
如 果 用 户 没 有 给 定 alpha = sort not іп ('updated', 'id', 'ereated') < 
已 有 的 搜索 结果 , 或 if id and not conn.expire(id, ttl): 如 果 用 户 给 定 了 已 有 
给 结 ій = а 

者 给 ام‎ S 14 = None 的 搜索 结果 ， 并 目 这 个 
Б: КАНЕ | зене Зах 结果 仍然 存在 的 话 ， 那 

的 搜索 操作 。 id = parse апа search(conn, query tl-ttl 么 延长 它 的 生存 时 间 ， 
ا‎ aeaii pipeline = conn.pipeline (True) 返回 搜索 结果 包含 的 元 
JU To pipeline.scard('idx:' + id) д Pan 

жез жыйа: pipeline.sort('idx:' + id, by=by, alpha=alpha, жен. is 
根据 指定 属性 对 结 desc=desc, start=start, num=num) 以 及 搜索 结果 的 ID, 其 
果 进 行 排序 ， 并 且 results = pipeline.execute() 中 搜索 结果 的 ID 可 以 用 
只 获取 用 户 指定 的 return results[0], results [1], id 二 在 之 后 再 次 获取 本 次 
那 一 部 分 结果 。 搜索 的 结果 。 


ѕеагсһ апа _ѕогї ( ) ПОПООООО0000000000000000000000 
startUuUnumUUUUUUUUUUUUUUsortDOUUUUUUUUUUUUUUUUUUUDD 
о00000++1000000000000000019000000000000000000000 


О000000000000000000006оооіерО0000000000000000000 
О0000000000000006еаіѕ$П0508ТОО0000000000000000000000 
ОДОООО0000000000000000000000000000000000000000000 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 
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О000000000006еаіѕ$ПОО000000000000000000000000000 
О0000000000000000000050г& огаег ооооооооооооооооооооо 
ОДОООО000000000000000000000000000000000000000000000 
ОООДОО00000000050АТО00000000 


ООДО00000508 ТОООДООООООДООДООО00000000000000000000 
ОДДО00000000000000000000000000/21УТЕВ5ТОКЕПОДОДОМАХОЮ 
ОДОООО000000000000000000000000000000000000000000000 
ОДООО0000000000000 


7.2.1  БОООООДО0000000 


Дрр200030000Кеаї  ПОООООООО000021МТЕВ5 ТОВЕГ 
ZUNIONS ТОКЕПОООООООООООД000000000200000000000000000 
ОДООО00000000000000000000000 


ОДОООО000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000 


ПО0000000000000000000000508ТО0000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 


000000 


ППҒаке Сагадеро00000000000000000000000000000000 
ОО0000000000000000000000000000000000000000000050АТр 
ОДООООО000000000000000000000000000000000000000000000 
ООДОО000003 0000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
0000 


ООООО00000000000000000000000000000000000000000000 
ОООО00000000001900000000000000000000000000000000007- 
б0005еагсһћ and zsort ( ) П0000000000ѕ5еагсһ апа sort()II 
О000000000000000000000000005еагсй and 25огї () 000000 
ООО000000000000000000000000000000 


00007-6  ОДООООО000000000000000000000000 


和 之 前 一 样 ， 函 数 接受 一 个 已 有 搜索 结果 的 ID 作为 可 选 参 
数 ， 以 便 在 结果 仍然 可 用 的 情况 下 ， 对 其 进行 分 页 。 








ЖОШ def search and zsort (conn, query, ід-Копе, ttl=300, update-1, vote=0, — 
已 有 搜索 start=0, num=20, desc-True): 
ФЕ R j 
结果 的 生 if ід апа rot conn.expire(id, ttl): 如 果 传 人 的 结果 已 经 过 
存 时 间 。 | id = None ĦA, 或 者 这 是 函数 第 一 
проти 次 进行 搜索 ， 那 么 执行 
а: с Жан a 
id = parse_and_search(conn, query, ttl=tt1) 标准 的 集合 搜索 操作 。 
scored search = ! 函数 在 计算 交集 的 时 候 也 会 用 到 传人 的 ID 
id: 0, < 一 键 , 但 这 个 键 不 会 被 用 作 排 序 权重 ( weight ) o 
'sort :update': update, 
FI 'sort:votes': vote 
对 文章 评分 进行 } 使 用 代码 清单 7-7 定义 的 辅 
调整 以 平衡 更 新 id = zintersect (conn, scored search, tti) а 助 函数 执行 交集 计算 。 
时 间 和 投票 数 | pipeline = сопп.ріре1іпе (True) | 
量 。 根 据 待 排序 | pipeline.zcardí('idx:' + id) < 一 获 收 结果 有 序 集合 的 大 小 。 
数据 的 需要 ， 投 Ж “азықтағы zrevrange('idx:' + id, start, start + num - 1 从 搜索 结 米 
内 数量 可 以 被 调 | о ааа ЕЕ 
#11, 10, 100, pipelire.zrange('idx:' + id, start, start + num - 1) J1 ( page ) o 
其 至 更 高 。 results = pipeline.execute () 返回 搜索 结果 ， 以 及 分 
return results[0], results[1], id < 页 用 的 ID 值 。 


search and zsort()UUUUUUUUUUUUUsearch апа sort () 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
search and 50г32()ПОДОДО50АТО00000000 
search and 250г32()ПДООбОО02І1МТЕВЗ ТОВЕЛОДОООООДОДОДОО 


ОДООО000000000000000000 


search and 2501 ( ) П00000000х51пїегѕесї ( ) 2ипіоп() 
ПППППППІӘГІПГІМТЕВ5ТОВЕ/ 20МІОМЅТОВО0000000000000000 
00000007-700000000000000 


00007-7 П0000000000000000000000 


调用 者 可 以 通过 传 | 创建 一 个 新 的 

ЗАО ЕЈ | def _zset_common (conn, method, scores, ttl=30, **kw) 临时 标识 符 。 

使 用 事务 流水 线 。 id = str(uuid.uuid4()) < : 
> 


execute = kw.pop(' execute', True) 


pipeline = сопп.ріре1іпе (True) if execute else conn 4 
H for key in scores.kevs(): 
ок sa sl'idx:' + key] = scores.popikev) 
为 输入 的 键 添加 ој Е : ж 
вен ох 设置 事务 流水 线 ,保证 每 个 音 
ġidi 独 的 调用 都 有 一 致 的 结果 。 
为 将 要 被 执行 getattr (pipeline, method) ('1ах:' + id, scores, **kw) 
的 操作 设 兽 好 pipeline.expire('idx:' 4 id, tti) < з Ұн Ў 
相应 的 参数 if execute: 为 计算 结果 有 序 集合 
рити ріреїіпе.ехесисе () ЕЗУ НАНУ ША 
un Ж š iċ 4 š ы 2 = 
ео return id 将 计算 结果 的 ID 返回 给 调用 
Ми NN ` ~ 
执行 这 个 操作 m def zintersect (conn; items, ttl=30, **kw): ж, 以 便 做 进一步 的 处 理 。 
مانم‎ А return zset common (conn, 'zinterstore', dict (items), ttl, **kw) 
АЗЕ ЕК ЛТ 
这 个 操作 。 def zunion(conn, items, ttl=30, **kw): 
8 return zset common (conn, 'zunionstore', dict (items), ttl, **kw) 
对 有 序 集合 执 he 
行 交集 计算 的 对 有 序 集合 执行 并 集 计 算 的 辅助 丽 数 。 
辅助 函数 。 


ОДД000000000000007-20000000000000000000000000000 
ОДОДООО00000000000000000000000000000000000000000000 
00 


ОДО00000000 


ООО000000000000000000000000001.30000000000000 
ООО000000000000000000000000000000000001.3000 
article vote()Upost агііс1еѕ () Пдеї агііс1еѕ ()ПП 
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ОООДОДО000000000000000000 


ОДООО0000000000000000000000000000000000000 
Псотрозке valuel ППОДОДОДООО000000000000000000000000 


ОДООООО0000000000000000000 


ООД0О00000000000000050А8ТО00000000000000007000000 
UUUUUUU О0900000000000000000000000000000000000 


7.2.2 ПОООДО0000000 


ОДООО0О000000000000000000000000000000000000000000 
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ОДООООД000000000000000000000000000000000000000000000 
Кеа ППОДОДОДОДОО0О00000000000000000000000000000000 
ОДООД000000000000000 


О00000000000000000000000000000АеаіѕП00000000000 
IEEE 7540000000000000000000000006400000000000000000 
П00000000000000640000000063000000000000000000000000 
О00000063000000000000000000000000000048000000000000 
О00000000060000000000000000000000000000000 


00007-800000000000000000000000000000000000000000 
бОб000000006000000000000600000000006000000000000000 
ООДОДА5СИОДОДООООАБСНОДОДОДОГО 


00007-8  ОДО0О000000000 


将 字符 串 的 前 6 个 字符 用 户 可 以 通过 参数 


转换 为 相应 的 数字 值 ， def string to score(string, ignore case=Falge): 来 决定 是 否 以 大 小 
比如 把 空 字 节 转换 为 if ignore case: 写 无 关 的 方式 建立 
0、 制 表 符 (tab) 转换 string = string.lower() RRI 

为 9 大写 A 转换 为 65， > pieces = maplord, string[:6]) 

诸如 此 类 。 while len(pieces) < 6: 


аи ока 为 长 度 不 足 6 个 字符 的 字符 串 添 加 占 
位 符 ， 以 此 来 表示 这 是 一 个 短 字 符 串 。 


score = 0 
for piece in pieces: 





对 字符 串 进 行 转换 得 出 一 score = score * 257 + piece + 1 

lk return score х 2 4 (len(string) » 6) 

Ж ічі Eren 通过 多 使 用 一 个 二 进 制 位 ,程序 可 以 表明 字符 串 是 否 正 好 为 6 

和 占 位 符 。 个 字符 长 ,这样 它 就 可 以 正确 地 区 分 出 “robber” 和 “robbers”， 
| 尽管 这 对 于 区 分 “robbers” 和 “robbery” 并 无 帮助 。 


string to_score()00U000000UUUUUUUUUUUUUUUUUUUUUD 
ОД000000000060000000-- 1000000000000000000000А45С1000 
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6.1.20000000000000000000000000000000000000000 
ОО000000000000000000000006.2000000000МАТСНр 
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ООО000000000000000000000000000000000000000000000 
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find prefix гапде() П0Паоиїосотр1еїе on ргетіх()П 
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ОДООД000000000000000000000000000000000000 


7.3.1 00000000 
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ОООДОО0000ТРООООООДОООДОООООД000СЄРЗОПОО0О0О000000000 
умеоо0000000000000000000000000000000000000000000 
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ОДОООО000000000000000000000000000000000000000000000 
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ОДООО000000000000000000 
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ОДООООО000р00000000000000000000000000000 
100000000 
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ОДООООО00000000000000000000 


200000000000 


ОДООООО000000000000000000000000000000000000000000 
О0000000000057СРМПеѕїтаѓќеа СРМППППесРМПППЕРМПППИП 
ООДО00000000СРМОДООООООООООООСЄРМОПеєРмМПОООДОДОСРСОП 
ОСРАОДОООДОДООООО0О0000000есРМО 


ЗПДОЄРЄДОДесрм 


UUCPCUUUUUUUUUUUUUUUUUU0000000000Uclick-through 
гахер с тврддрб0020000р000000000ПеєРмоорроробороооро0О 
ОО0000000000000000000000000000000000.2500000000.2% 
00000. 0020000000еСРМ0Оо.25 х0.002 х 1000=0.500Ц 


АПППСРАПППеЕсСРМ 


CFAUUUUeCPMUUUUCPCUUUUeCPMDUUUUUUUUUUUUUUUUUUUD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 
U10000UU0UU0UUUUUUUeCPMUUUUUUUUUUUUUUU0U0.2%DUUUUUUUDUU 
UU10%0U000.100UU0UUCPAU30U0UUUUUUeCPMD 
0.002x0.1x3x 1000-0.60O(HLI 


00007-90000СРСОДОСРАДООПФеЄРМОДОСОД 


00007-9  ОООПОСРСПООСРАПОПОППеСРМПООП 


return 1000. * срс х clicks / views 次 数 计算 出 来 的 ， 而 动作 的 执行 概率 则 
是 由 动作 执行 次 数 除 以 点 击 次 数 计算 出 


def cpa to ecpm(views, actions, сра): 
return 1000. % cpa * actions / views 


def cpc to ecpm(views, clicks, cpo): 内 为 点 击 通 过 次 是 由 点 击 次 数 除 以 展示 


来 的 ， 所 以 这 两 个 概率 相 乘 的 结果 等 于 
动作 执行 次 数 除 以 展示 次 数 。 
00007-900000000000000000000000000000000000000000 
ОДОД000000000000000000000000000Дассомпіїпо systemi 
П00000000000000есРрмоп0000000000000сРСО000есРмро00 
ОСРАППОПесРмопоо00000000000000000000000000000000000 
ОДООООО00000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
OOU 


ЗО00000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000000000000000000000?0 


000007.1007.200000000000000000000000000000000000 
ООДОО0ОО0000000000040000000000000000000000000000000 
ОДООООО0000000000000000000000 


07.100000000000000000000000000000000001000000000 
ОДООООО00О0000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОООД0000000000000000000000000007-1000000000000000 


00007-10 ПОООО000000000000000000000000 


为 了 进行 定 
向 操作 ,把 
TEĦID 
加 到 所 有 相 
合 里 面 。 


为 了 评估 新 广 
告 的 效果 ， 程 
序 会 使 用 字典 
来 存储 广告 每 
1000 次 展示 的 
平均 点 击 次 数 
Bi ЕЗД 
行 次 数 。 


ТО ЕСРМ = | 


"орс!: cpe to ecpm, 没 置 流水 线 ， 使 得 程序 可 
“сра!: сра to ecpm, 以 在 一 次 通信 往返 里 面 完 
"срт': lambda targs:argsl-11, 成 整个 索引 操作 。 


} 


def іпдех ad( 


pipeline 


conn, id, locations, content, type, value): 
= conn.pipeline (True) 


for location in locations: 


> pipeline.sadd('idx:req: '-location, id) 


words = tokenize (content) 


for word 


rvalue = 


1000, 
pipeline. 
pipeline. 


pipeline 


对 广告 包含 的 单 
词 进行 索引 。 








in tokenize (content): 

pipeline.zadd('idx:' 4 word, id, 0) — 记录 这 个 广 
ТО ECPM[type] ( 告 的 类 型 。 

AVERAGE PER 1К.ае (type, 1), value) 

hset('tvpe:', id, type) <— 
zada('idx:ad:value:', id, rvalue) < 一 将 广告 的 ecCPM 添加 型 | 个 
.зача('ад:Базе value:', id, value) < 记录 了 所 有 广告 的 eCPM 的 
sadd('terms:' + id, tlist(words)) <- 有 序 集合 申 面 。 


pipeline. 
pipeline. 


execute () 


把 能 够 对 广告 进行 定向 将 | 告 的 基本 价格 base value ) 
ше йа ESE к 添加 到 一 个 记录 了 所 有 广告 的 
基本 价格 的 有 序 集合 里面 。 


О000000000000іпаех аа ( ) О000003000000000000000000 
ОДООООД000000000000000000000000000000000000 


index ad( ) ПООО0000000000000000000000000000000000 
ОО000000000000000СРСО00СРАОО00000000есРморо0000®0 


0003 паех ай ( ) П0П000000000000000000000000000000000 
ОДО0000000 


ОДООД00000000000000000000000000 


7.3.3 00000000 


ОДООООО000000000000000000000000000000000000000000 
есРмМОо00000000000000000000000000000000000000000000 
ОООО000000000000000000000000000000000000У/еб 0000000 
ОООД0000000000СРСОСРАПООПФеСРМОООДОООООДОООДОДОДО00 
О000000 


UU00000000000WebUUUU000000000000000000000000U0UU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUU0000000000000000000000000000000UUUUUUUUUUUtotaiD 
ecCPMUUUUUUUUUUUeCPMUUUUU00UeCPMUU0UUUUUIPUOU0U00D0 
ПООО00000000000000000000007-11000000000000000 


00007-11 ПП000000000000000000 


基于 匹配 的 内 容 28 


计算 附加 值 。 





获取 -4 ID, Ë |" 
可 以 用 于 汇报 并 
记录 这 个 被 定向 
H 


记录 一 系列 定向 操作 的 
执行 结果 ,作为 学 习 用 户 
行为 的 其 中 一 个 步骤 。 


根据 用 户 传 人 的 位 置 定向 参 
数 ， 找 到 所 有 匹配 该 位 置 的 
target_ads (conn, locations, content): ， 告 ， 以 及 这 些 广告 的 eCPM。 
pipeline = conn.pipeline (True) 
matched ads, base ecpm = match location(pipeline, locations) <- 
words, targeted ads = finish scoring( 
pipeline, matched ads, base ecpm, content) 


pipeline.incr('ads:served:') 


pipeline.zrevrange('idx:' - targeted ads, 0, 0) <- 
target ій, targeted ай = pipeline .execute() l-2:) 
找到 eCPM 最 高 的 广告 , 并 获取 这 个 广告 的 ID。 
if not targeted_ad: P 
return None, None q 如 果 没 有 任何 广告 与 目标 位 置 
匹配 ， 那 么 返回 空 
ad іа = targeted ad[0] иш, ЖЕН, 
record targeting result (conn, target id, ad id, words) 
return target id, ad id 向 调用 者 返回 记录 本 次 定向 
操作 相关 信息 的 ID， 以 及 被 
选中 的 广告 的 ID。 


ПОО000000000000000000000000100000000000000000000 
О000000000000000000000*а где ads ( ) П0000000000000000 
ООДОД00000001900010000000000000000000000001900000000 
ОДООООО00000000000000000000000000 


ОДООООО0ОД000000000000000000000000000000000000000 
О0000000000000000000000000000000000000000000есєрмрр 
0007-12000000000000000 


00007-12  00000000000000000 


根据 所 有 给 定 的 位 
置 ， 找 出 需要 执行 че 
找 出 与 指定 地 区 相 匹 


配 的 广告 ， 并 将 它们 
存储 到 集合 里 面 。 


f match location(pipe, locations) : 





required = ['кед:' + loc for loc in locations] 
matched ads = union (pipe, required, ttl-300, execute-False) 
return matched ads, zintersect (pipe, 

{matched ads: 0, 'ad:value:': 1), execute-False) u 


找到 存储 着 所 有 被 匹配 广告 的 集合 ， 以 太 存 
储 着 所 有 被 丐 配 广 告 的 基本 eCPM 的 有 序 集 
合 ， 然 后 返回 它们 的 ID。 


match location( ) ОДОДОДООООО000000000000000000000 
О000000000000000000000000есРрмопооо0о00000000000000 
00021пёегѕес ( ) П000000000_ ехесиєерррОО0000000000 
eCPMDUUUUUUUUUUUUUUUUUUUUUUUUURedisUUUUUUUUUD 


ОД00000 


ОДООО0О000000000000000000000000000000000000000000 
О00000000000000000есРмопоо000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
UUUUUU00000000UIPO0UUUUUUUUUeCPMUUUUUU 


О00000000000000есРрмопоо0000000000есрмроп000000 
О0000000000000000000000000000есРрмопооо0000000сРМП00 
О00000000000000есРрмопооо00000000000000000000000000 
о0000000000есРмоп000000000000000000есРмр 


О00000000000000000000есРмрооооо00000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОО00ООесрмроо0000000000000000000000000000000Аеаіѕ000 
ОДООООО000000000000000000000000000000000 


ОО000000000000000000009еотеѓгіс ауегадеППППППП 
[arithmetic ауегадеПО00000000000000000есРмоб0000000 


ОДОООО00000000000000000000000000000000000000000 
есРМОо00000000000000000000000000000000000000000000 
ОД00000 


О0000  ОООО0О00000000000000000000000000000000000 
О0000000000000000000000000000есРрмооо00000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
000000 


О040МІ ОМ5ТОАЕПОООО000МАХПООО00МІМО000000000000000 
П000000000000000020М10М№ТОКЕПО00050М000000000000000 
О000000000000000000000000000000000000.500000000000 
0000007-1300000000еєрмррдрорбеєерРморо00000 


00007-13 ПО0000000000000есРм 


def finish scoring(pipe, matched, base, content): SGS ЖЕЕ 
йүн. os 对 内 容 进 行 标记 化 处 理 ， 
bonus_ecpm = (| | і БЫ 
以 便 与 广告 进行 匹配 。 


words = tokenize (content) 





for word іп words: з == zi 
word bonus = zintersect ( 找 出 那些 既 位 于 定向 位 置 之 
pipe, {matched: 0, word: 1}, execute=False) 内 , 又 拥有 页 面 内 容 其 中 一 个 
bonus ecpmlword bonus) = 1 单词 的 广告 。 
if bonus есрт: 
minimum = zunion( А Арел. 
pipe, bonus есрт, aggregate-'MIN', execute=False) 计算 每 个 FRAN 
maximum - zunion( eCPM 附加 值 和 最 大 
pipe, bonus_ecpm, aggregate='MAX', _execute=False) eCPM 附加 值 。 
return words, zunion( 
pipe, (Баве:1, minimum:.5, maximum:.5), ехесибе-Ға1ве) 
t V: da , b š Ж г ме TY 
Тин ын 将 广告 的 基本 价格 、 最 小 eCPM 附加 值 的 一 半 以 及 最 
ЖЕРДЕН РАМА ВО K eCPM 附加 值 的 一 半 这 三 者 相 加 起 来 。 
任何 可 匹配 的 单词 ， 那么 返 
回 广告 的 基本 eCPM. 


О000000000000+#1пі$ћ_ѕсогіпо О)ПППППППП executellili 
UUUUUZINTER2TOREUUUZUNION2TOREUUUUUUUUUUUUUUUUUUUD 
finish ѕсогіпо( ) 000%агдеї ads ( ) 00000 
finish ѕсогіпо ( ) О0000000000000000000000000000000000 
ПАІМТЕК5ТОКЕПОООООО0000000040МІ ОМЅТОКЕПОООО0000000 
2ОМІОМЅТОАЕПОО00000000000041МТЕАЅТОАЕВООО0000000000 
ООООО0000000000000000000000000000000000000000000000 
UUUUUUUUU 


07-5007-60000000000000007-5000000000000000000000 
О000000000000000000000000000000000000007-6000000000 
О05000000000000006еаіѕП0000000000000000000 


(ӨБ 需要 处 理 的 数据 


步骤 1 单词 

对 所 有 单词 附加 值 有 序 ika 

集合 执行 并 集 计 算 。 kl 
单词 
单词 

步骤 2 

对 并 集 计 算 结 果 以 及 位 置 

匹配 广告 执行 交集 计算 。 


附加 值 A 
附加 值 B 
附加 值 C 
附加 值 D 





07-5  ООО"О0000000000"00000000000000000000000000000000000000000000000 


00000000000 


(ӨБ) 需要 处 理 的 数据 




















步骤 1 ( ей ) 单词 附加 值 A 
对 位 置 匹配 广告 以 及 每 个 
单词 附加 值 有 序 集合 分 别 e 
执行 交集 计算 。 
= 
С я» )] 单词 附加 值 C 
но 
对 步骤 1 得 出 的 交集 计算 i = 
结果 执行 并 集 计算 。 
( B 72 单词 队 加 值 D 
е 
ст 
07-6 -000“00000000000”00000000000000000000000000000000000000000Redis00 
00000 


О000000000000+агодеї_ааѕ ( ) П000000+агоеї 14000 
ad і14УДОДІОДОДОДО0О000000000000000000000000000000000 
О0000000000000000%еюо0000000 


UUUUUUDUDU 


00007-1 1000007-13000target_ads ()000 
finish_scoring () ОДОДОООООО00О0000000000000000000 
о00000000есРрмопо0000000000000000000000есРмоп00 
О000000000000000000000000#1п1$ћ_ѕсогіпо ( ) 0000000 
ОДООД00000000000000000000000 


О00000000007-11000+а гдеї_ааѕ ( ) 000000000000000 
record targeting гез5иї Є () ОПОДООДОДООО000000000000000 


00 


7.3.4 00000000 


ОДОООО000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО0О00000000000000000000000000000000 


UU0000000WebUUUUUUUU0000000000000000000000000UDU 
D0000000000000000000000WebOQ000000000000000000000000 
БЕН Р бООДОО0О0000000000000000000000000 


ОДООДООО00000000000000000000000000000000000000000 
00000“ 0007 ОО00000000000000000000000000000000000000 
О"ПОДОД000"00000000000 


100000 


ООДОД00000000000000000000007-120000 


record targeting гезиї Є () ОПОДООДОДОО000000000000000 
О00000000000000000000000000000000000есРмооо0000000 


OOU 


e 00000000000 
e 00000000000 
e ООООД00000000000000000 


ОДООООО000000000000000000000000000000000000000000 


ОО00000000000000000000007-24000000000000000 


00007-14 ППОООООООООООООООООО0000 


pipeline = conn.pipeline (True) 


间 相 匹配 的 那些 


def record targeting result(conn, target id, аа id, words): КЕ 


terms = conn.smembers('terms:' 4 ad id) 单词 。 
matched = list(words & terms) 
if matched: 


matched key = 'terms:matched:$s' $ target id 





pipeline.sadd(matched key, 'matched) 
pipeline .expire (matched kev, 900) 


的 生存 时 间 。 


广告 每 展 type = conn.hget(' type: , ad id) 为 每 种 类 型 的 广告 分 别 记录 
pipeline.incr('type:%s:views:' % type) 它们 的 展示 次 数 。 

示 100 次 ұжы word іп matched: 

就 更 新 一 pipeline.zincrby('views:%s' $ ad id, word) 

次 它 的 pipeline.zinerbv('views:$s' $ ad id, '') 





eCPM, if not pipeline.execute() [-1] $ 100: 
update_cpms (conn, ad id) 


如 果 有 相 匹 配 的 单词 出 现 ， 
MERKEN, HE 15 分 钟 


记录 广告 以 及 广告 包 
含 的 单 闻 的 展示 信息 。 


record targeting гезиї ї () П0000000000000000000000 
ОО000000000001000)00000Дирдатєе сртѕ ( ) 000 
update сртѕ ( ) ООДОООООО00000000000000000000000000000 
ОДООО00000000000000 


О000000000000есРрмроо000000000000000000000000000 
ОДО00000 


200000000 


ОДОООО000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
орррорбор0бесРморрдрбодррорборорбоорроророробо x 000000000 
ОДДУОДДОО0ОДОО0000000000000000000000000000000000000 
О000000000000000000000000 


ОДООД00000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
007-15000000000000000 


00007-15  ОДОДОДО00000 


def record click (conn, target id, аа id, action-False): 
pipeline = conn.pipeline (True) _ 
У — Z< Pk: 
click key = 'clicks:%s'%ad id 如 果 这 是 一 个 按 动 


PERE, ЗЕН. 
match key = 'terms:matched: '%target id 被 匹配 的 单词 仍然 
type = conn.hget('tvpe:', ad id) 存在 ,那么 刷新 这 些 记录 动作 
if Бүре == єра!: ; “а 单词 的 过 期 时 间 。 信 аб 而 
pipeline ..expire (match key, 900 ĠER 
根据 广告 的 类 if action: 不 是 点 击 
遵 ， 维 持 一 个 click key = 'actions:%s' $ ad id 4 信息 。 
全 局 的 点 击 / 动 | , I | касо 
作 计 数 器 if action and буре == 'сра': 
“ е pipeline.incr('tvpe:ks:actions:' $ type) 
else: 
pipeline.iner('tvpe:$s:clicks:' $ буре) 
matched = list (conn. smembers (match Кеу)) 为 三 告 以 及 所 有 被 定向 至 
matched.append('') 该 广告 的 单词 记录 本 次 点 
for word in matched: کک کے‎ 
H 5 
pipeline.zincrbv(click key, word) 击 (或 动作 ) o 
pipeline .execute{) 
update_cpms (conn, ad id) «но 对 广告 中 出 现 的 所 有 单词 的 
eCPM 进行 更 新 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О0000000СРАПООО000000000000000000000000000000000000 
ОО0000000000000000015000000000000000000 


record стіск( ) ППОООО000000000000000асеіопо000000 
СРАДДООДОДОДООООДООДОДДОДОДОООООДОСООДОСОДООас оп ПП 
ODOT ruel 


О00000000000200002 ООоПО000000000000000000000000 
О0000000000000000000000гесо га с1іск () 00000000000000 
000000000Оирдате сртѕ ( ) 000 


ОДОДОО00000000000 


О000000000000000007-15000Огесога сіїск( ) 00000 
ОО00000000000000000100000210000000000000000000000 
О0000000000000000000000000000+1піѕһћ_ѕсо гіпо ( ) 000 
record click( ) ППОООООООООО0000000000000000000 


ОДОО00000000000000000000000000000Пирдате сртѕ ( ) П 
00 


ЗПППесрм 


UUUUUUUUupdate_cpms ( ) ВО0000000000000000000000000 
ОДООООО0000000000000000000000000000000000000000000 
О00000000000000есРмо00000 


ППесРмоб000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
UUUUUUUeCPMDU 


ППесРмоб000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
П000000000000000000000есРмоо000000есРрмобоо00000000 
десРМУ)ДПесРМОООДОООООООДОООДОООООДОО00000000000000 
ОДО00000000 


О00000000000000000000000000000000000есРрмооо0000 
000000000000007-160000000000000есРМО000 


00007-16 дбдрордеєРму)др000еєРмрророр0000 


def update cpms(conn, ad id): 


将 广告 的 点 
击 率 或 动作 
执行 率 重新 
写 人 全 局 字 
典 里 面 。 | 


如 果 广 告 还 没 
有 被 点 击 过 ， 
那么 使 用 已 有 
的 eCPM。 


计算 广告 





的 eCPM 并 -| 


更 新 它 的 


价格 。 
— 


计算 单词 
的 eCPM。| 


pipeline = conn.pipeline (True) 
pipeline.hget('tvpe:', ad id) 
pipeline. zscore('ad:base value:', ad id) 


获取 广告 的 类 型 和 价格 ， 以 及 





pipeline.smembers('terms:' 4 ad id) 广告 包含 的 所 有 单词 。 
type, base value, words = pipeline.execute() 
which з 'clicks' 判断 广告 的 eCPM 应 该 基于 点 击 
if type == 'сра': 次 数 进行 计算 还 是 基于 动作 执行 

which = 'actions' 次 数 进行 计算 。 
pipeline.get('type:%s:views:' $ type) 根据 给 定 广告 的 类 型 ,获取 
pipeline.get('type:%s:%s' $ (type, which)) 广告 的 展示 次 数 和 点 击 次 


type_views, type_clicks = pipeline.execute() 


数 〈 或 者 动作 执行 次 数 ) o 
AVERAGE PER 1lK[type] = ( 


1000. ж int(tvpe clicks or '1') / int(tvpe views or '1')) 





йо ик 如 果 正 在 处 理 的 是 一 个 CPM 广告， 
那么 它 的 eCPM 已 经 更 新 完毕 , 无 
View key = 'views:%s' 5 ад id 需 再 做 其 他 处 理 。 





click key = '%s:%s' $ (which, аа id) 


to ecpm = ТО ECPMItvpel 


pipeline.zscore (view kev, '') | — уво 
pipeline.zscore(click key, '') | ео S 


ad_views, ad_clicks = pipeline.execute() 
if (ад clicks ог 0) < 1: 
ад ecpm = conn.zscore('idx:ad:value:', ad id) 
else: 
ad есрт - to ecpm(ad views or 1, ad clicks or 0, base value) 
pipeline.zadd('idx:ad:value:', ad id, аа ecpm) 


for word in words: 


pipeline. zscore (view kev, word) 获取 单词 的 展示 次 数 和 点 击 
pipeline.zscore (с1іск Кеу, word) x Ba ~ 
views, clicks = pipeline.execute() [-2:] | 次 数 (或 者 动作 执行 次 数 ) o 
if (clicks ог 0) < 1: 如 果 广 告 还 未 被 点 击 过 , 那么 
Continue 不 对 eCPM 进行 更 新 。 
> мога ecpm = to_ecpm(views ог 1, clicks ог 0, base value) 
bonus з word есрт - ad ecpm < 一 计算 单词 的 附加 值 。 
pipeline.zadd('idx:' + word, ad id, bonus) у Р 
pipeline.execute() 将 单词 的 附加 值 重 新 写 
入 为 广告 包含 的 每 个 单 
词 分 别 记录 附加 值 的 有 


序 集合 里 面 。 


UUUUUeCPMDD 


ирдате_срт5 () П00КеаіѕПОООО000000000000000000 
О00000000000000000000000300000000000000000000000 
О000000000000ичрааїе cpms ( ) П0О00000000000000000000 
О000909000000000000000000орда+е сртѕ ( ) ПО00000000 
Кеаіѕ00З0000000000000 


update сртѕ ( ) ПОПОООО0000000000000000000000000000 
о000000есРмоо0000000000есрРмро00 


ОДООООО0ОДрО0000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
О000000000000000000000000000000000000000Аеаіѕ= 00000 
ОДО0000000 


e ООДОДООДОДОО0ОДОДОД0О000000000000000000000000000 
О000000000000000000000000000000000000000000002.5 
ПППгезса(е уіемеа ( ) ООДОДООООО0О000000000000000 
О0000000000000000000000000000000009ора! expected 
СТЮЦППП 

。DUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


ООО0000000000000000 
О0000000000000000005есопа-ргісе айсіїопПОДД0О0Д0000000 
ООО000000000000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUU0UUUUUUUUUUUUUUUUUUUUUUUUUUU107Yo020%o0 
ОО000000000000000000есРморооо00000000000000000 
1000000000000есРмпроо000000000000000есрмпро000 
ООО0000000000000000000000000есРмооо0000000000000 
ООО000000000000000000000000000000000000000000000 
ОДОО00000000000000000000000000000000000000000000 
О0000000000000000000000000000000іпумегѕе linear 
relationshipUUUUSOUUUinverse sigmoid relationship|[ LED 
О0000000000000000000002 00005 0000D00000000000000 
00000 
ООООО0000000000000000000000000000000000000000000 
Одг000р5000бД00000000000000000000000есРМОДО0000 
UUUUUUUUUUUUUeCPMD 
ООО000000000000000000000000000000000000000000000 
ООО000000000000000000000000000000000000000000000 


ОДООД000000000000000 

e OUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОО000000000000000000000000000000000000000006.400 
UUUUUUUUUUUUUUUUUUUUDU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
ОДОДООО000000000000000 


доббеРувм. сОМДПОДерРувм.СОмМ ДОООП 
ОО0000000000 


7.4 ПО 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000 


ОДООООО0ОД00000000000000000000000000000000000000 
ОООД0000000000000000000008еаї рбрр00000000 


О00000000000000000ғаке сагадепрроооооооооооооооо 
ОДОДООО0000000000000000000000000000000000000000000 


7.4.1 UUUUUUUUU 


ОДООООО00000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ПО0000000000000000000005рІРРОО000000000000000000000 
О050ІРҒООО0000000000000000000000000000000007-170000 
ОДООООО00000000000000000000000000000 


00007-17 ПО000000000000000 


def add job(conn, job id, required skills): 
conn.sadd('job:' + job id, trequired skills) 把 职位 所 需 的 技能 全 部 添加 

def is_qualified(conn, job id, candidate skills): 到 职位 对 应 的 集合 里 面 。 
temp = str(uuid.uuid4()) 
pipeline = conn.pipeline (True) 把 求职 者 拥有 的 技能 全 部 添加 到 一 个 临 
pipeline.sadd(temp, *candidate_skills) Д 并 设置 过 期 时 间 。 
pipeline.expire (temp, 5) š ыйы | 
pipeline.sdiff('job:' + job id, temp) <4 


return not pipeline ..execute() [-1] 
如 果 求 职 者 具备 职位 所 需 的 


全 部 技能 ， 那 么 返回 True。 


找 出 职位 所 需 技能 当中 ， 求 职 
者 不 具备 的 那些 技能 ， 并 将 它 
们 记录 到 结果 集合 里 面 。 





is qualified()UUUUUUUUUUU000000000UUUUUUU0000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUU 


7.4.2  ПИДООООО0000 


ОДООООО0000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
07-18000000000000000000000 


00007-18  ЮОО0Д00000000000 


def index job(conn, job id, skills): 将 职位 ID 添加 到 相应 将 职位 所 需 技能 的 数 
pipeline = conn.pipeline (True) 的 技能 集合 里 面 。 量 添 加 到 记录 了 所 有 
for skill in skills: 职位 所 需 技 能 数量 的 

pipeline.sadd('idx:skill:' + skill, job_id) «ноз 有 序 集合 里 面 。 


pipeline.zadd('idx:jobs:req', job id, len(set(skills))) 
pipeline execute() 


0000000007 .100000000000000000000000іпдех_ јо ( ) 00 
О00090000000000000001паех_ јор ( ) ПО09000000000000000000 


ОДО00000000 


О000000000000000000000000000007.3.30000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
ZUNI0N>T0REDUUUUUUUUUUUUUU0U0U000U0UUUUUUUUU00000000UUUUUU 
UUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUU- 100000000000000010 
ОДОД000000000021М ТЕВ5 ТОВЕБООООООООООПОДООО0000000000 
ОО00000000000000000007-1900000000000000000 


00007-19  ДОДООО000000000 


def find jobs(conn, candidate skills): 


计算 求职 | skills = () 设置 好 用 于 计算 职 
者 对 于 每 for skill іп set(candidate skills): 位 得 分 的 字典 
个 职位 的 skills('skill:' + 8кі11) = 1 E 
得 分 。 p job scores = хипіоп(сопп, skills) l 
final result - zintersect( 计算 出 求职 者 能 够 胜任 以 及 
conn, (job scores:-1, 'jobs:req':1)) 不 能 够 胜任 的 职位 。 
return conn.zrangebyscore('idx:' + final result, 0, 0) «о 
> 返回 求职 者 能 够 


胜任 的 那些 职位 。 


UUUUUUUfind_ jobs()D00000000000UUUUUU000000UUUUUUUU 
О00000000000000000000000000000000000000000000000000 
000000 


ОДООООО000000000000000000000000000000000000000000 
ОДД000000009000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
О000000007..3.ЗО00000000000000000000000000000000000000 
0000 


UUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
ОД000000 


О000000 


ОДООО0ОО0000000000000000000000000000000000000 
ОДООД0О000000000000000000000 


ПродеРовм. СОМІПОДерувм.СОмМ ППППП 
ОО0000000000 


7.5 DU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


UUUU0U000000000000000000000000000RedisU000000000 
UUUU0000000000000000000000RedisU20UUUUUUU0000000000 
UUUUUUUUUUU 


UUUU0000000000RedisUUUUUUUUUUUUUUTwitterDU0000000 
OUL 


© ДОбОр00000000000000000000веаї о Оророоор0050ї00 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


@ 00uuuU000hetto\xoUheLto000000UUUUUUUUUU0000000D00 
00000025700256000000000А5СІП0001000000000000000000 
0000000000. 033 7000000000000000000000000000000000000 
О0060000000000000000000000049.0337П000000000000000 


@ ОДОООДОООООД00О000000000000000000000000000000000 
О000000000 


@ ООООООООО00О000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


D000ePUBw.COMDUUUUePUBw.COM ПППП 
UUUUUUUUUUUUU 


080 ОО0000000 


000000 


e 00000 

• 00000 

e ОДО000000000 
e ОДО0000000 

e [JAPI 


ОД000000 Twitter оДбО0О00000000000000000000000000 
ОООДОО00000000000000000000 мм і єегророОООДОООО00000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
Поррбћоте timelineDOUUOU0U000Ufollowing П5ЄДО000000 
Ufollower ІіЅЄООООООООООООООООООООООООООООООООООО0000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
D000000000000000000Web00000000000000DAPlDstreaming 
АРІП0000000000000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


Одмегу-іпсеп5імедДОДОООО000000000000000000000000000 
Тим'єєегДДОДОБОДОДООДО000000000000000000000 


ООООО0000000000000000000000000000000000 
LDDUePUBw.COMII || | jJePUBw.COM ПОД 
UUUUUUUUUUUDDU 


8.1 UUUUU 


0000 Twittert ООДОО0О000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000000000 


UU000000000000000000000000000000000RedisU0000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


8.1.1 ПП 


ОДООО0О00000000000000000000000000000000000000000 
Twitter[ | JDI] 


UUIUUUURedisU000000000000000000UUUUUUUUUUUUUUUDUD 
ОДООООД000000000000000000000000000000000000000000000 
00000000 текач-і піогллабіоп0008-10000000000000000000000 
Дробо00даг уозіа пДДО0000 Тммієєег О000000 


иѕег: 139960061 


login 
id 


name 


followers | 


following 


posts 
signup 


dr josiah 
139960061 


. Josiah Carlson 


176 

79 

386 
1272948506 


08-1 ОООО000000000 





hash 





008-10000000000000000000000000000000000000000000 
ОДО000000000000000000000000000000000000000000000000 
О000000008-100000000000000000000 


00008-1 ОДОДО00000000 


程序 使 用 了 一 个 散 
列 来 存储 小 写 的 用 
户 名 以 及 用 户 卫 之 
间 的 映射 ， 如 果 给 
定 的 用 户 名 已 经 被 
映射 到 了 某 个 用 户 
ID ， 那 么 程序 就 不 
会 再 将 这 个 用 户 名 
分 配给 其 他 人 。 


在 散 列 里 面 将 小 
写 的 用 户 和 名 映射 
EHF ID. 


返回 用 户 ID. 


def create user(conn, login, name): 
llogin = login.lower() 
lock - асаціге lock with timeout (сопп, 
if not lock: 
return None 








if conn,hget ('users: 
release lock(conn, 'user: 
return None 


1, Ilogih): 
ла = conn.iner('user:id:') 
pipeline = сопп.ріреїіпе (True) 
> piveline.hset('users:', llogin, id) 
pipeline .hmset ('user:$s'$id, Í 


loġit's lögin, 
ате за, 
'name': name, 


'followers': 0, 
'following': 0, 
'posts': 0, 

signup': time.time() 


pipeline ..execute() 


1 , 
р | 
'user:' + llogin, lock) 


release lock(conn, 
return id 


使 用 第 6 FE Ж ЛАРК R 
试 对 小 写 的 用 户 名 进行 加 锁 。 


'user:' 


如 果 加 锁 不 成 功 , 那么 说 明 
给 定 的 用 户 名 已 经 被 其 他 
用 户 占 用 了 。 


+ llogin, 1) 


' sllogin,lock) 


«оз 每 个 用 户 都 有 一 个 独 
—Il-HJID, X4 ID 
是 通过 对 计数 器 执行 
自 增 操作 产生 的 。 


将 用 户 信息 添加 到 用 户 
对 应 的 散 列 挂面 。 





释放 之 前 对 用 
ӘЛЕГЕ 


| 


ОДООООО00ОД000000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUrequestUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUIPUUUUUUUUUIPUUUUUUUUUUUUUUUUUUUUUUUU 


00 


ОД00000  ОООО0000000000000000000000000000АРІО00 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО00000000000000000 


ОООО00000000000000000000000000 Тмм'єєегррр000000 


8.1.2 ППО 


ОООО0000000000000000000000ргой'еророборобо00000 
ОДООООО000000000000000000000000000000000000 


ООДОО0000000000000000000000000000019000000000000 
ОДООООО000000000000000000000000000000000000000000000 
000000008-20000000000000 


status:223499221154/99616 一 一 一 hash 





message My pleasure. | was amazed that... 
posted 1342908431 
| ' 223499221154799616 

: 139960061 


: dr josiah 


08-2 DODDDD0Dd00000 





08-гп)0000000000000000000000000008-20000000000000 
00 


00008-2  ОДОДО000000 


为 这 条 状态 def create status(conn, uid, message, **data) : 根据 用 户 ID 获取 
消息 创建 一 pipeline = сопп.ріре1іпе (True) 用 户 的 用 户 名 。 
个 新 的 ID。 pipeline.hget('user:%s'%uid, 'login') що 
ا‎ pipeline.incr('status:id:') " ; 
login, ій = pipeline.execute() 在 发 布 状态 消息 之 
1f not login: 前 ， 先 验证 用 户 的 
B. 
return None = 账号 是 否 存在 。 
data.update ( í 
'message': message, 
'posted': time.time(), 
к є А 筹备 并 设置 状态 消 
"ла АТ э. 
š IRTA E 
更 新 用 户 的 'login' Я login, 息 的 各 页 信息 。 
已 发 送 状 态 р 
消息 数量 pipeline.hmset('status:%Ss'%sid, data) 


pipeline .hincrbv('user:$s'żuid, 'posts') 返回 新 创建 的 状 
ріреїіпе.ехесиіе () 态 消息 的 ID- 


return іа 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
IDUUUUUUUUUUUUUUUUUUUUUUUD 


0008 .4000000000000000000000000000000000000000000 
О0000000----О00Л/01//0 


ПродеРовм. СОМІПОДерувм.СОмМ ДОООП 
ОО0000000000 


8.2 UUUUU 


ОДО000000000 7ммієєегооббПО0000000Л70000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОДО000000000 


ОДООО0000000000000000000000000000000000000000000 
ОДОО0000000000 


ОДООООО0О000000000000000000000000000000000000000 
ООДОО0000000000000000000010000000000000000000000000 
0008-ЗО000000000000000000000 


home:139960061 —— T On -h-. zset 


227138379358277633 | 1342988984 


227140001668935680 | 1342989371 
227143088878014464 | 1342990107 





08-3  ООООООО00000000100000000000000000000000000000000000000100000000 
0000 





ООДОО0000000000019000000000000000000000000000000 
ОООД000012000000000001000000000000000008-30000000000 
ОДООО00000000000 


00008-3 ОДОООО0000000000000000000 


def get status messages(conn, uid, timeline-'home:', page-1, count=30): 4 

获取 时 МА АЕ? же зақ. (page-1)*count, pagetcount-1) 函数 接受 3 个 可 选 参 

问 线 上 | 5 5 | й ” 数 ， 它 们 分 别 用 于 指 

而 最 新 pipeline = conn.pipeline (True) 定 函 数 要 获取 哪 条 时 

的 状态 for id in statuses: | - 间 线 ЗЕН 

54 pipeline.hgetall('status:%*s'%id) 5 ew 

ID. return filter(None, pipeline.execute()) < 有 多 少 条 状态 消息 。 
使 用 过 滤器 移 除 那些 已 经 被 删 获取 状态 消息 本 身 。 
除了 的 状态 消息 。 


ОДООООО0000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000 


О0000000000000000000000577770ргоћІе timeline[ [III 
ООО000000000000000000000000000000000000000000000000 
ОООО0О000000000000000000000000000000000000000009000 
get status те55аде5 ()ПДДОДДД З ітет іперордо000 
profile :000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДО00000 


ПППЦеРӘВу.СОМППППеРИВ\у.СОМ ДОООП 
ОО0000000000 


8.3 ПОООО0000000 


ТимієсегоДОДОДОДОДОО000000000000000000000000000000 
ОДООООО00000000000000000000000000000 


ОДООООО00000000000000000000000000000000000000000 
ОДООО000000000000000000 


ООДОД0000000000000000000000000000000000000000010 
ОДООООО000000000000000000000000000000000000000000000 
оторроророрордоооборрородородоророре-ероррроб000000000 
ОДО00000 

















Tollowers:139960061 zset following:139960061 zset - 
558960079 ! 1342915440 18697326 ! 1339286400 
14502701 1342917840 22867618 1 1339286400 
14314352 1342957620 558960079 , 1342742400 
A 








08-4  ПООООООО0000000000000001000000000000000000000001900000000000000 
ОДООО00000000000000000000000000000000000000000000019000000000000000 
ОДДТ90000000000000000000000000000 











ОДООО0О000000000000000000000000000000000000000000 
ОДООООО00О0000000000000000000000000000000000000000000 


ООДОД0000000000000000000000000000000000000000000010 
ОДООООО000000000000000000000000000000000000000000000 
О000000008-4000000000000000 


00008-4 ОП000000000000000000 


HOME TIMELINE SIZE = 1000 把 正在 关注 有 序 集合 以 及 关注 
def follow_user(conn, uid, other_uid): Жз еы А. bb БЕСЕ Кеч: 
fkevi = 'following:%s'%uid рен еу 
fkey2 = 'followers:%s'%other_uid 如 果 uid 指定 的 用 户 已 经 大 


жет 
if conn.zscore(fkevi, other ціа): ЕТ other иза А, 
return None ”那么 返回 。 


пом = time.time() 


od ی‎ j 将 两 个 用 户 的 ID 分 别 添加 到 相应 的 正在 

pipeline.za ey other_ui now РА pa 

pipeline .zadd (Екеу2, uid, пом) ER К» 
pipeline. zrevrangs ('profile: sother_uid, 注 用 户 的 个 ів да д 

0, НОМЕ TIMELINE SIZE-1, withscores=True) | HOME TIMELINE + SIZE ЖИА МНЕ, 

following, followers, status and score = рі ipeli ne.executel) l-3: 
pipeline.hi ЗБ uer: %s'%uid, 'following', int(following)) 

修改 两 个 用 pipeline.hinc нсі ser:%s'%other_uid, 'followers', intifollowers)) 

户 的 散 列 ,更 if status and score: 

新 他 们 4 iż pi ан ne.zadd('home:$s'żuid, t'dict(status апа зсоге)) 

新 他 们 各 日 poipeline.zremrangebyrank('home:%s'%uid, 0, -HOME TIMELINE SIZE-1) 

的 正在 关注 | 了 

У - b Е Z УР. му. ыз ا‎ rea g У TES 

数量 以 及 关 pipeline.execute 对 执行 关注 操作 的 用 户 的 主页 

gg, rm True o 返回 True 表示 关注 时 间 线 进行 更 新 , 并 保留 时 间 线 

> 操作 已 经 成 功 执行 。 上 而 的 最 新 1000 条 状态 消息 。 


0000000000 Ofollow user ()0000000000000000000000 
ОДОД000001900000000000000000000000000000092с2 () 0000 
ОДДОО00000000000010000000000000 


follow иѕег() ОПДООООДО00000000000000000000001000 
ОДООООО000000000000000000000000000000000000000000000 
ООДОО0000000190000000000000000000000000000000000000 
ООДОО00000000000000010000000000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОО ЗООД0ОО00000000000000000000000000000000000000000 
О0000000000000000000000008-5000000000000000 


00008-5 О000000000000 


def unfollow user(conn, uid, other ціа): 把 正在 关注 有 序 集 合 以 
如 果 uid 指定 的 用 户 Екеуі = 'following:%s' suid | ихата 
并 未 关注 other ша fkey2 = 'followers:%s'%other uid 名 缓存 起 来 
Пет | 5 о 
指定 的 用 户 , ДУХ Ра if not conn.zscore (fkeyl, other uid): 
"E; return None 
кА, 从 正在 关注 有 序 集合 以 
pipeline = conn.pipeline (True) 及 关注 者 有 序 集 合 里 面 
pipeline.zrem(fkeyl, other_uid) 
pipeline.zrem(fkey2, ціа) — 移 除 双 方 的 用 户 ID. 


pipeline.zrevrange ('profile:$s'tother цій, 


获取 被 取消 关注 的 用 户 最 近 0, HOME TIMELINE SIZE-1) 


发 布 的 LOME TIMELINE following, followers, statuses = pipeline .execute () l-3:) 


SIZE 条 状态 消息 。 
pipeline. hinerbkv('user:ks'juid, 'following', int(following)) 
对 相应 用 户 信息 散 Pipeline. kinerbv ('user:$s'tother uid, 'followers', int( followers)) 
сту 1Ё statuses: Рет М 

pipeline. zrem ('ћоте:%8'%ц1а, *statuses) а 对 执行 取消 关注 操作‏ ا 

н - : 的 用 户 的 主页 时 间 线 

量 进行 更 新 。 pipeline .executel) н-ни 

s return True < кее 进行 更 新 ， 移 除 被 取 
返回 True 表示 取消 关 消 关 注 的 用 户 发 布 的 
注 操 作 执 行 成 功 ， 所 有 状态 消息 。 


unfollow user( ) ООДООДОО0О00000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОО00000000 


ОДО0000000 


ОДООО0ОО0000000000000000000000000000000000000 
ОДООО0О00000000000000000000000000000000000000000 
ОДООО0000000000000000000000000000000000000000000 
000006 .4000000000000000000000000000000000000 


О000000 


UUUUUUUUUUTwitterUU000000000000000000000000U0UDU 
ОООД00000000000000007011о0м иѕег ()000 
unfollow user ( ) ППОО0000000000000*0010” 0000000000 
ОДООДО0000000000000000000000000000000000000000000 
ООДО00000"000000070000000000000000000000000000 


ОДОДООО0ОДОД0000000000000000000000000000000000000 
ОДООООО0000000000000000000000000 


D000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


8.4 UUUUUUUUUU 


Др Twitter ДОДОДОДОДОО0000000000000000000000000000 
ОО00000000000000000000000000000000000000000008.1.200 
ОДООООД000000000000000000000000000000000000000000000 
ОДОДООО00000000000000000000000000000000 


ОДООООО00000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000 


ОДООДО000000000000000000000000000000000000000000 
ІОО000000000000000000000000000000000000000000000000 
ОО000000000000000000000100000000000000000000000000 
ОООД000000000000000000002000000007ммієєегоорб000000 
2500ПД000000000000000000000000000000000000000000000 
00 


ОДООООО000000000000000000000000000000000000000000 
ІОО00010000000000000000007міего000000000000100000 
0000001000250000100025Д0000000000000.1220000099..996) 
О000000000000000000000000000.1%П000000000000 


0000000000000010000000000000000006.4000000000000 
Орр000008-600000000000000000000000 


00008-6 – 0000000000000 


def post_status (conn, uid, message, **data): 


如 果 创 建 状态 消息 失 id = create status (conn, uid, message, **data,) <1 使 用 之 前 介绍 
败 ， 那 么 直接 返回 。 | | if not id: ЗУ RARE 
return Мопе 建 一 条 新 的 状 
К > posted = conn.hget('status:%s'%id, 'posted') 态 消息 。 
көзді шаг рені | у 如 果 程 序 未 能 顺利 地 区 
° $ | 取消 息 的 发 布 时 间 ， 那 
post = (str(id): float (posted) } 么 直接 返回 。 
将 状态 消息 添加 > conn.zadd('profile:%ss'%uid, **post) | 将 状态 消息 推送 给 
AN تار‎ ти 
到 用 户 的 个 人 时 syndicate status(conn, uid, post) < 用 户 的 关注 者 。 
EREM return id 


OOOpost_status () ОДДО000000000000000000000008.200 
П00сгеа+е status () ОПОДОДОООООООДОДОООО0000000000000 
ОДО0000000Озупаїсате 5%а%и5 ( ) ПП00000000000000000000 
ILLLLLLIsvndicate status ( ) П0000000008-7000 


00008-7  ОДООО000000000 


POSTS PER PASS = 1000 «но 函数 每 次 被 调用 时 ， 最 
def syndicate status(conn, uid, post, start=0): 多 只 会 将 状态 消息 发 送 
给 1000 个 关注 者 。 
以 上 次 被 更 新 的 followers = conn.zrangebyscore ('followers:%*s'j!%uid, start, 'inf', 
最 后 一 个 关注 者 start=0, num-POSTS PER PASS, withscores=True) 在 遍历 关注 者 的 同 


为 起 点 ， 获取 接 pipeline = conn.pipeline (False) 时 , 对 start 变量 
下 来 的 1000 个 for follower, start in followers: < 一 的 值 进行 更 新 ， 这 
关注 者 。 | рее . zadd ( ms тамын х крові) 个 变量 可 以 在 有 需 
оре га У pipeline.zremrangebyran TA ИЕК 
将 状态 消息 深 加 到 'home:$s'$follower, 0, -НОМЕ TIMELINE SIZE-1) уан Р 
所 有 被 获取 的 关注 | pipeline ..execute() “Psyndicate_ 
考 的 证 页 时 间 线 里 status () ЙН. 
者 的 алалық if len(followers) >= POSTS PER PASS: ý 

ШІ, ӘРЕ MIN execute_later(conn, 'default', 'syndicate_status', 

时 候 对 关注 者 的 主 [conn, uid, post, start]) 

页 时 间 线 进行 修 如 果 需 要 更 新 的 关注 者 数量 超过 

前 ,防止 它 超过 限 1 000 A, 那么 在 延迟 任务 里 面 继 

定 的 最 大 长 度 。 续 执行 剩余 的 更 新 操作 





svndicate status ( ) ПОДОО000000010000000000000000 
О00000000100000000006.400000АРІДООООООООО0000000000 
UUUUUU00000000UUpost_ status()UUUsyndlicate status()[] 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 
svndicate message ( ) ПЈООООО000000000000000000 


ОДООДО0О00000000000000000000000000000000 


ОбОбОб000000000000000деб status те55адез () П00000 
О000000000000000РуёһопП+#і1+е г () ПО000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
О0000000000008-80000000000000000000 


00008-8 О00000000000000 


def delete status(conn, uid, status id): 对 指定 的 状态 消息 进行 加 锁 ， 
key = 'status:%s'%status_id 防止 两 个 程序 同时 删除 同一 
lock = acquire lock with timeout (conn, key, 1) <— 条 状态 消息 的 情况 出 现 。 
if not lock: 
| 如 有 果 加 锁 失 败 ， 那 么 直接 返回 。 


return None 








if conn.hget(kev, 'uid') != FE SEG : 如 果 uida 指 定 的 用 户 并 非 状态 消息 

删除 指 release lock(conn, key, lock) 的 发 布 人 ， 邦 么 函数 直接 返回 。 

H return None 
定 的 状 
Am L, ее tasa нш 从 用 户 的 个 人 时 间 线 里 面 移 
> pipeline.de y зай 
pipeline.zrem('profile:%s'%uid, status id) < 除 被 删除 状态 消息 的 ID 
pipeline.zrem('home:%s'%uid, status id) < 从 用 户 的 主页 时 间 线 
m 里 而 移 除 被 删除 状态 
ріреїіпе.ехесиціе зі 
消息 的 ID。 


release lock(conn, key, lock) elf e . 


pipeline.hinecrbv('user:$s'ġuid, 'posts', -1) < 
return True 


状态 消息 的 数量 。 


UU0000000000000000000000000Ude Lete _ status()UUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUD 


UUUUUUUUUUUUUID 


ОДООО0ОО0000000000190000000000000000000000000 
ООООО019000000000000000000000000000000000000000 


1000000 


ОООО000000000000000000000000000 ТммієєегорО000000 


ОДООООО000000000000000000000000000000000 


e ООДОД00000000000000000 


• TILLILLILILLLILILIULLILI 

• ОДОДО000000 

e ОДООО0000000000Осопуегвайіоп flow 
e (ILILLILI 

。DUUGOUUUUUUUUUUU#UUUUUUDO 

e ПППППОГПППІ 

• ОООДООО0000000000000 


ОООО0000000000 Twitter ооооооооооооооооооооооооооо 
ОООД0000000000000000000000 мм іеегрррорОДО00000000000 
ОДО00000000000 


。DUUUUUUU U OUU +1 0 

e OU 0000000000 

e 00000000000000000006.5 .200000000 

• ПО00000000000000000009гоир #теііперо000000000000 
ОДООД000000000000000 


ОООО00000000000000000000Тммієсегоорбобр000000000000 
О00000000АРІ000000 


DU000ePUBw.COMUNUUUePUBw.COM ДОООП 
ОО0000000000 


8.5 ПАРІ 


ОДООО0000000000000000000000000000----О0000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUGUUUUUUUUUUUUUUUUUUU 
UUU0000U00000000calliD00000000000000000000U0000UUUUUUUDU 
000—==00000000000—=0000000000006гоаасаѕ# 00000 
ПемепОООО000000000000000емепї listener 00000000000 


ООО0000000000 Тмм'єєегОДАРІОДОООДОООАРІООО 


ПАРОООООООО С им і єегодрООДОДОО00000000000 TWwitter0000 
ООДОО00О0000000АРІОООООООДОО0000000000000 


ОООО000000000000АРІО0000 и егоооооооооооооооооо 
DDD0000000000real-time eventUUUUUUUUUUUU0U000000000000 
О0000000 Twitter оДб000000000000 


ООДООАРІОООООДООООДООД00О000О000000000000000 
8.5.1  ПАРІЦІСГО 


ООООД00000000000000000000000000А РІООООООДООО0000 
ООООО0ОО0000000000000000000000400000000000000000000 


ООДОО00О0000000000000АРІОООООДОООООДОДООО00О00000000 
ОДООООО00000000000000000000000000000 


О000АРІПОО00000000000000000000003000000 


e ПАРІПОООООО0000 
e ПООООООООООООООООООООООООО0 
e ПАРІПОООООО0000 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000 


ОДООДО0000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОДООО0000000000000000000000000000000000000000000 


О00000000000000#1егіпо option ДОДО000000Тммієсетр000 
Dpublic streamp À ООПАРІОДПОДООООДОООО00ОО00000000000000 
О0000000000000000000000000000°00000007%іёег/7777 
Обгепо5е)0//П5атпріепоб0000000000007? 


UUUUUUUARPIUUUUUUUUUUUUUUUUUUUUUUARPIOUUUUUUUUUD 


8.5.2 [ПЦ 


D000000000000000Redis0000000000000000000000Web000 
ОООО000000000000000АРІОО00000000000000000000000000 
ОрІЧ9Ф2ДОДО0УУеБОО0О5кас коДООООООООООДОДОДУУеБОДОДОДОДО 
ПООО00000000000000000000000000000000АРІП 


ОО00000000000000000000АРІ0000000000000000 
ММеб5сокеєѕ085РОҮПО0000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ППП/ Пеһипкеа о ДОДОДОДОД00Н 7 ТРОООООООО0000000 


ОДОД000000УУеборооОД000000Н7ТРОООООООООО000000000 
ОрОрр000м/еь ПОрОООО000000000000О5ігеатеа message 
dataUUUUUUU 


ППППППНТТР М/ЕБОПОООДОДООРУЄВОПООООСОООООДОООДОДО 
UU00000UUUUUPythonD000UPythonUUUUU000UUUUylieLdUUUUUU 
О00060000000000000000000000Руєһопо000000Руєһопо0000 
О000000000000000000тіхОо00000000%еюо00000000000000 
О0000%еооо0000000000000000000000000000000Руһопо0000 
О000Руєһоп00000000000000000—=00000000000000000000 
D00000000000000HTTP Меюбоо00000000000000000000000000 
UUUUUUUUUUUUUUUUUU 


ІГНТТРГІІГІП 


РуєпопоО0000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
UUUUrequest handier00000000000GETOPOSTO0O0HT ТРОДОО000О 
ОДО00000000008-900000000Н7 ТРООООДОООООООД0О000000 


00008-9 НТТРПППППИПППИП 


创建 一 个 名 为 Streaming 


APIServer 的 类 。 这 个 类 是 一 个 НТТР 服务 器 ， 
ЕФЕ сың Р 并 且 它 具有 为 每 个 请 求 创建 
组 件 在 主 服 务 器 线 SocketServer.ThreadingMixIn, 一 个 新 线程 的 能 力 ° 
程 死 亡 之 后 , 关闭 所 BaseHTTPServer .HTTPServer): 
有 客户 端 请 求 线程 。 daemon threads = True 


创建 一 个 名 为 do_GET () 














创建 7 个 各 为 > class океан maħ ETESSUSALBRNALEM ( | 的 方法 , 用 于 处 理 服务 器 
StreamingAPIR вазенТТРб5егуег.Вазент?РЕеацевснагаїег) : 接收 到 的 GET 请 求 
equestHandler PARA = Š 
的 类 def do GET(self): < 

ү А г? parse identifier (self) 

这 个 新 创建 的 类 可 以 if self.path != '/statuses/sample.json': 如 果 一 切 顺 利 ,那么 
用 于 处 理 HTTP 请 求 。 ГІ return self .send_error (404) 调用 辅助 两 数 ,执行 
调用 辅助 函数 ， 获 取 客 process filters (self) a 实际 的 过 滤 工 作 。 

РАИ o daf do POST(self): س‎ 
У узра ; < parse identifier (self) <- 
MERA per 请 求 访问 的 不 if self.path != '/statuses/filter.json': 创建 一 个 名 为 
是 sample 流 或 者 firehose — 
: ħ return self.send error(404) 

йі, ЯКА “404 页 而 未 找 q Мо. PORTA R 

到 ”错误 process filtersiself) < 方法 , 用 十 处 理 
s 到 

如 果 这 个 POST 请 来 访问 的 不 是 инна), МЕНЯ 

用 户 过 滤器 、 关键 字 过 滤器 或 省 如 果 一 切 顺利 ， 那 么 调用 辅助 函 Ж, 获取 客户 шаны. 

fu Elias, Ж ОЗЫП "404 页 数 ， 执 行 实际 的 过 滤 工 作 。 端 标识 符 。 








面 木 找到 ”错误 。 


00008-90000000000000000000000000000000040 GETOULI 
Одо РОЗТОДОДООДОО0000АРІДОДОДо ФЕТОДОДОДОДООД00000 
ПППао РОЗ ТОДОООДОООДОДОД00000 


00008-900000000000000000000000000000000000000000 
О0000РуёћопрОо0000000000000000000000000000000000000 
ОДАРІО00000008-1000000000000000000000000000 


00008-10 ПООООНИТРО0О0000 





м; Ж.Т. 
.. 创建 一 个 监听 本 机 8080 端口 的 流 API 服务 
i ` АЫ 由 器 实例 ,并 使 用 Streaming APIRequestHandler 
ла J з уе І» 
的 代码 。 f name == main 来 处 理 请 求 。 
server = StreamingAPIServer( - 
打印 信息 行 。 ('localhost', 8080), StreamingAPIRequestHandler) 
— 


rint 'Starting server, use <Ctrl-C> to stop! 
а к Р 服务 器 会 一 直 
server.serve forever() < 


| 运行 直到 进程 
被 杀 死 为 止 。 


О00АРІПООО0О00000000000000000000000000000000 


parse ідепіі?іег( ) П00ргосеѕ5ѕ filters ( ) 000000000000 
ОО000000000 


2000000 


00008-11000рагѕе ідепіійіег() ООООООДОД00000000000 
ОДОООО000000000000000000000000000000000 
parse_identifier( ) ППОООО000000000000000000000000000 
ОДОО0000000000 


00008-11 00000000000000000000 


def parse identifier (handler) : 将 标识 符 和 查询 参数 


如 果 请 求 里 面包 含 了 handler. identifier None 设置 为 预 留 值 
< EN HZ ~ апа ет. 1 y 2 А = ! А в A 

查询 参数 ， 那么 处 理 这 handler.query = |) 

些 参数 。 —p if '2' in handier.path: 

i р 7“ > handler.path, , query = Һапа1ег.раїһ.рагіібіоп ('?') 

取出 路 径 里 面包 含 查询 参数 handler.querv = urlparse.parse_qs (query) 

的 部 分 ,并 对 路 径 进行 更 新 - | b identifier = handler.query.get('identifier!) ог [None] 

handler.identifi = identifi 0 < ` у 4 

获取 名 为 identifier 的 A R E N | 通过 语法 分 析 得 
查询 参数 列表 。 使 用 第 一 个 传人 的 标识 符 。 出 查询 参数 。 


parse identifier( ) ПППОО0000000000000000000000000 
ОДООООО0000000000000000000000000000000000 


ЗПООНТТРО 


ООО00Н 7 ТРОПОДОООООООДООООД0ОО000О0000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООО00000000000000000000009тТРОО00000000000000000000 
О000000000000000000000000008-1200000000000000000000 


ОД00000 


00008-12  0000000000000000000 


把 那些 需要 传人 参数 > FILTERS = ('track', 'filter', 'location') 如 果 客 户 端 没有 提供 标识 符 ， 


і def process_filters (handler) : > жы 
才能 使 用 的 过 滤器 者 id = handler.identifier 那么 返回 一 个 错误 。 


放 到 一 个 列表 里 面 。 if nöt id: - 


return handler.send error (401, "identifier missing") 


方法 ， 结 果 应 该 是 G S а 如 果 客 户 端 指定 的 是 过 滤器 方法 , 那 


args = Мопе 


获取 客户 端 指定 的 И method = handler.path.rsgplit('/')[-1].split'i'.') [0] 
2 : Ħ 


sample (BB EL) if method -- 'filter': < 一 | 么 程序 需要 获取 相应 的 过 滤 参数 。 
或 者 filter (ЗДІЙ Gata = cgi.FieldStorage( 对 POST 请 求 进行 语法 分 
器) 这 两 种 中 的 一 种 。 fp=handler .rfile, Ж. 从 而 获知 过 滤器 的 类 


headers-handler .headers, + 
envi коп= { 'REQUEST METHOD':'POST , 型 以 及 参数 。 
!CONTENT_TYPE' : handler .keaders('Content-Tvpe'l, 


p 





for name in data: 
找到 客户 端 在 请 求 if name in FILTERS: 
中 指定 的 过 滤器 args = data.cetfirst (name) . :омег () .зр1іё (', ) 
М š ргеак 
if not args: 
如 果 客户 端 没有 指 FI return handler. send error(401, "го filter ргсуідеа"; 
定 任何 过 滤器 , 那 | мы. 
入 返回 一 个 错误 。 





如 果 客 户 端 指定 的 tandler.send response (200) ЖЕНЕ РАНА наших. 


是 随机 消息 请 求 ， 那 kandler.send_headexr('Transfer-Encoding'!, 'chunked') 
么 将 查询 参数 用 作  Гапаїег.єпа headers() 


сайы args = handler.query 最 后 ， 问 容 户 端 返回 一 个 回复 ， 告知 客户 端 ， | 





args 恋 量 的 值 。 — cuit = [False] 对 过 滤 结 果 进 行 达 代 。 
使 用 Python 列表 for item in filter content(id, methoċ, name, args, quit): < 
à у Еку: 

ні 为 引用 传 ii handler .wfile.write( '$Xirinssirin'$(lenlitem), item) )} < 

іе аз 位 E жо, дос Ж. 使 用 分 块 传输 编码 向 客户 端 发 送 经 过 巴 

用 户 可 以 通过 这 1£ пос quit(o): #095 ( pre-encoded ) 的 回复 。 

个 变量 来 让 内 容 kandler .wfile.write('O\r\n\r\n') <— 如 果 服 务 器 与 客户 端的 连接 并 

ТЛЕ ят : » 15 = зу 

"aa 如 果 发 送 操作 引发 了 错误 ,那么 让 订阅 и Лы i 
іш 者 停止 订阅 并 关闭 自身 。 е 


ППргосев5 Т11<еге ( ) ООДОДООООО0ОО00О00000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000 


ОООО0000Н 7 ТРОДОООООООДОООДООО0ОО000О0000000000000000 
000000 


8.5.3 UUUUUUUU 


ОДООООО000000000000000000000000000000000000000000 
ОООД00000000000000000000000000000000000000 еп 
Ғасероок0Сбоодіе+0000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДО0000000 


ОрО0000000000000000008.5.2000000УУЕБООО00000000000 
ООО00000000000000000000000008.500000000000000000000 
О00000Тммієєегй гепозед Пп ПП 
ОДООООО00000000000000000000000000 


D00000030000000000000RedisDPUBLISHDDUSUBSCRIBEDOO 
ООДО00000000000000000000000000000000000РУВІТ15НО000000 
П000000000050В5САІВЕПОООО00000000000000000000000000 
00000уіеіа раскП0\Мебо000000000000000000000 


ІПО000000000000000000 


0000000000000008.1.200000000000008.40000000000000 
ОД00000000000000000000000000008-1 300000000 
create 5 каїиз ( ) ПЗОО000000000000000000000000000 


00008-13 П00008-20сгеа+е_ѕ+а+иѕ ()0000000000 


def create status(conn, uid, message, ххдаба): 
pipeline - conn.pipeline (True) 
pipeline.hget ('user:$s'suid, 'login') 
pipeline.incr('status:id:') 
login, id = pipeline.execute() 


if met 16915 
return None 


data.update ( í 
'message': message, 
'posted': time.time(), 
тах: па, 
ише! = цій, 
'login': login, 


)) eg وي‎ 
pipeline.hmset('status:%s'%id, data) 新 添加 的 这 一 行 
pipeline.hincrby('user:%s'%uid, 'posts') 代码 用 于 向 流 过 
pipeline.publish('streaming:status:', json.dumps (data)) 滤 需 发 送 消息 。 


pipeline.execute() 
return id 


О0000000000000000000000000000000008-140000000000 
00000 


00008-14  000008-80детете ѕ+а+иѕ ()0000000000 


def delete_status(conn, uid, status id): 
key = 'status:$s'sstatus id 
lock = acquire lock with timeout (conn, key, 1) 


if not lock: | 获取 状态 消息 ， 以 便 流 过 滤器 可 以 通 
ена 过 执行 相同 的 过 滤器 来 判断 是 否 需要 
if conn.hget (key, 'uid') != str(uid): НСИ Ч ЕЛ 2 EE ра 


release_lock(conn, key, lock) 
return None 


pipeline = conn.pipeline (True) 将 状态 消息 标记 为 
status = conn.hgetall (key) &— атағы рі 
status['deleted'] = True < 一 一 已 被 删除 ”。 
pipeline.publish('streaming:status:', json.dumps (status)) <- 
pipeline.delete (key) 

pipeline.zrem('profile:%s'%uid, status id) 将 已 被 删除 的 状态 
pipeline.zrem('home:%s'%uid, status_id) 消息 发 送 到 流 里 面 。 
pipeline.hinerbv('user:$s'$suid, 'posts', -1) 


pipeline ..execute() 


release lock(conn, kev, lock) 
return True 


О00000000000000ае\ее status () ООДОО0000000000000 
ОДОООО0000000000000000000000000000000000000000000070 
UUUUUU ПО000000000000000000000000000000000000000000 
ОДД0000070000"0000000000000000000000000000000000000 
ООДОО00О000019000000000000000000000 


2000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О000000000000000000008-1500000000000000000000003000 
ОО00000000000000000000000рчьѕиоо0000000000000000000 
ОДООООО000000000000000000000000000000000 


00008-15  ПОООО00000000 


4 使 用 第 5 вољан 
创建 一 个 过 滤器 ， 让 | 


кі ЛИГА aredis connection('social-network' 
它 来 判断 是 否 应 该 将 з 1” | | S> 
def filter content(conn, id, method, name, arge; quit): 


消息 发 送 给 
消息 发 送 给 客户 端 。 -> match = create filters (id, method, name, args) 
rs Ж pubsub = conn.pubsub() 
执行 订阅 前 的 pubsub. subseribe((l'streaming:status:')) с кан те 
准备 工作 。 通过 订阅 来 获取 消息 。 
< 


for item in pubsub.listen(): 
message = item['data'] 


从 订阅 结构 中 取出 状 У decoded = json.loads (message) 


态 消息 。 if match (decoded) : < 
| 与 过 滤器 相 匹 配 。 
在 发 送 被 圳 除 的 消息 之 前 ， if decoded.get ('deleted'): 
S У yield json.dumps (1 
و د ن‎ a '1а': decodedl'id'l, 'deleted': True)) 
ы іа! | 如 果 Web 服务 器 与 客户 端 
对 于 林 被 删除 的 严 配 状态 消 РАВА: тила 之 间 的 连接 已 经 断 开 ， 那 么 
A. 程序 直接 发 送 消息 本 身 。 if quit [0] : 停止 过 滤 消 息 。 
break 
pubsub.reset () < 一 重 置 Redis Ek, 清空 因 为 连接 速度 
不 够 快 而 沾 留 在 Redis IR ERR E 
冲 区 里 面 的 数据 。 


О000000#11%ег_соп+еп () П08000000Аеаіѕ$000000000000 
ОО00000000000000000000000000000000000000000000Аедіѕ 
ОДО00000000 


UUU3UUUUUReEdisUUUIUUCc lLient - output -buf fer-limit 
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00008-16 DUO0000000UUUUUfactory functioni) 


sample 方法 不 需要 用 到 
папе 参数 ， 只 需要 给 定 
id 参数 和 args 参数 即 可 。 


def create filters(id, method, name, args): 

if method — 'sample': | 
return SampleFilter(id, args) 

elif mame == 'track': 
return TrackFilter (args) 

elif name == 'follow': filter 方法 需要 创建 并 返 
return FollowFilter(args) m {ЙЕНЕ 如 果 没 有 任何 过 

elif name == 'location': ЈАРЕ НОБ 滤器 被 选中 那么 


return LocationFilter (args) 
| | | < 引发 一 个 异常 
raise Exception ("Unknown filter") < 7 o 





ООО00000000Ос геате filters ( ) ПООО0000000000000000 
О000000000000000000007%іег00+#1 гепо5еор 00000 
дагаеппо5еруддрОД56ргієгегор000000Оассезз !еуе ЦООООО 
8-1 700000000000000 


00008-17  ДООО00000000000 


же ALAN эб ë a саралары ĦA 
args 参数 是 一 个 字 定义 一 个 SampleFilter 函数 ， 它 接受 id 和 args 两 个 参数 。 
典 ， 它 来 源 于 CET 
请 求 传递 的 参数 。 def SampleFilter(id, args): 
< 





< 


percent = int(args.get('percent', ['10']) [0], 10) 

ids = range (100) И ق‎ 
使 用 іа 参数 来 随机 地 选 shuffler = random.Random (id) 使 用 кн 
择 其 中 一 部 分 消 а ID shuffler.shuffle(ids) 给 定 的 状态 消息 是 否 符 ів 
被 选中 ID Wami А. keep = set (ids [:max (percent, 1)]) $ 器 的 标准 。 
KJ percent 参数 决定 。 def check(status): <— 创建 并 返回 一 个 


Ra Ede % 100) іп keep < 闭 包 函数 ， 这 个 
为 了 对 状态 消息 进行 过 滤 ， 程 序 会 获 函数 就 是 被 创建 
取 给 定 状 态 消息 的 ID， 并 将 ID 的 值 出 来 的 随机 取样 
取 模 100， 然 后 通过 检查 取 模 结果 是 消息 过 滤器 。 
MEF keep 集合 来 判断 给 定 的 状 
态 消息 是 否 符合 过 滤器 的 标准 。 
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2ampteFltterUU0000000000 一 一 000000001d00000000000000 
UseedU000000000000000000UIPU0000000000000U000U0UU 
detetedUU00000000000000000000000000UUUUUUUUUUUUUUUDUD 
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def TrackFilter(list_of_strings): 
groups = ГП) 
for group іп list of strings: 
group = set(group.lower().split()) 


函数 接受 一 个 由 词组 构成 的 列表 为 参数 ， 
如 果 一 条 状态 消息 包含 某 个 词组 里 面 的 所 
有 单词 ,那么 这 条 消息 就 与 过 滤器 相 匹配 。 





以 空格 为 分 if group: 
ЕЖ, MW groups .append (group) < 每 个 词组 至 少 需要 
ана def check(status): 包含 一 个 单词 。 
出 多 个 单词 。 > message words = set (status ['message'] .lower () .split () ) 
> for group in groups: 
l if len(group 5 message words) == len(group): 
遍历 所 有 return True 
а ожив 如 果 某 个 词组 的 所 有 单词 都 在 
消息 里 面 出 现 了 , 那么 过 滤器 将 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUU00000000000PythonUUUUUURedisUUUUUUUUUUUUUUUUDUD 


UUUUfotLtow00000000000000000000000000U0000UUUUUUUDU 
О00000000000000008-19000+#о11омо000000 
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АНЕ ТН А АЕ MHP 
def FollowFilter (names): 名 , 对 消息 内 容 以 及 消息 的 以 “@ 用 户 名 ”的 
nset = set() 发 送 者 进行 匹配 。 形式 存储 所 有 给 定 
for name in names: 
nset.add('e' + name.lower().Istrip('8')) H HPR, 


def checkistatus): 
message words = set(status('message'l.lower().split()) 
message words.add('e' + statusl'login').lower()) 


根据 消息 内 容 以 

及 消 息 发 布 者 的 Е. ім а ава є nset а 如 果 给 定 的 用 户 名 与 词组 中 的 
名 字 , 构建 一 个 由 某 个 词 洛 相同 ， 那 么 这 条 消息 
空格 分 隔 的 词组 。 与 过 滤器 相 匹 配 。 
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ОДООООО000000000000000000000000000000000000000000000 
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def LocationFilter(list of boxes): 


boxes - (l 
创建 一 个 区 域 集 合 ， 这 个 for start in хгапде(0, len(list ої boxes)-3, 4): 
集合 定义 了 过 滤器 接受 [ boxes.append(map (float, list_of_boxes[start:start+4])) 
的 消息 米 自 于 哪些 区 域 , def check(self, status): 如 果 消 息 未 包含 任何 位 置 
> location = status.get('location') 数据 ,那么 这 条 消息 不 在 
尝试 从 状态 消息 里 if not location: - 任何 区 域 的 范围 之 内 。 
面 攻 出 位 置 数据 return False 
> lat, lon = map (float, location.split(',')) 
ка for box іп self.boxes: 
如 果 消 息 包 含 位 置 数据 ， 遍历 所 有 区 域 ， 
那么 取出 纬度 和 经 度 。 尝试 进行 匹配 。 
if (boxlil <= lat <= Бох[3] апа 
box [0] <= lon <= box[2]) : 
return True 
return False = <2 2 
кент жыды 如 果 状 态 消息 的 位 置 在 给 定 区 域 
的 经 纬度 范围 之 内 ,那么 这 条 状态 


消息 与 过 滤器 相 匹 配 。 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
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list-max-ziplist-entries 512 列表 结构 使 用 压缩 列 
list-max-ziplist-value 64 表 表 示 的 限制 条 件 。 
散 列 结构 使 用 压缩 列表 表 hash-max-ziplist-entries 512 
示 的 限制 条 件 ( Redis 2.6 以 I hash-max-ziplist-value 64 





前 的 版 本 会 为 散 列 结构 使 zset-max-ziplist-entries 128 有 序 集合 使 用 压缩 列 
用 不 同 的 编码 表示 , 并 日 选 zset-max-ziplist-value 64 表 表 示 的 限制 条 件 。 
项 的 名 字 也 与 此 不 同 ) 。 


D0000000000000000DDDDDDDDDU-max-ziptist-entries[0 
U-max-zlpList-vatueUUUU000030UUUUUUUUUUUent гіе50000 
ОООО000000000000000000000000000000000ма і шерро000000 
UUU000000000000000000000000000000000UUUUUURedisUUD0 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDO 


DO000000000000Redis 2.600000Ведї  П0000000000009-10 
Орр000000009-2000000000000000000000000000000000000 
00 
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debuç object 首先 将 4 个 元 素 “encoding” 信 息 表示 这 


命令 可 以 查看 ВАЛ. 个 对 象 的 编码 为 压缩 列 
特定 对 象 的 相 >>> conn.rpush('test', 'а', 'b', 'e', 'а') 表 ， 这 个 压缩 列表 占用 
关 信 息 。 了 24 字 节 内 存 。 
— >>> conn.debug objecti'test') 
('encoding': 'ziplist', 'refcount':; 1, 'lru seconds idle': 20, 
'lyzut: 274841, 'at': 'ọxb6c9f120', 'serializedlength': 24, -一 


'tvpe': 'Value') 





| 555» ĊOnt.rpusħ('text', ver, ТЕТ, "а", 'ħi') 
: | 8 
再 向 列表 中 扒 >>> conn.debug ċbject('test') 
人 4 个 元 素 。 __ {'encoding': 'ziplist', 'refcount': 1, 'lru_seconds_idle': 0, 

对 象 的 编码 依然 是 '1ти': 274846, 'at': !0хо6с9Ғ120!, 'serializedlength': 36, 
EPIK, HEK | | Туре": 'Value') 尽管 序列 化 长 度 下 降 了 ， 但 是 对 于 压缩 列表 编 

ОР >>> conn.rpush('test', 65*'а') Ñ ед. зр ` А 
积 增 长 到 了 36 字 节 и 码 以 及 集合 的 特殊 编码 之 外 的 其 他 编码 来 说 ， 
( ЙПШДЕ АНУ 4 个 元 >>> conn.debug object('test') 这 个 数值 并 不 代表 结构 的 实际 内 存 占 用 量 。 
素 ， 每 个 元 素 都 需 ('encoding': 'linkedlist', 'refcount': 1, 'lru seconda idle': 10, 
ЕЁ 1 字 节 进行 'lru': 274851, 'at': 'Oxb6c9f120', 'serializedlength': 30, 

itvpe': 'Value') 
存储 ， 并 再 来 2 字 conn.rpop''test') 
>>> š BP (Eek 1; 

ИЈАН ) o | "ааааазаааааааааасааааасааааагааааасалааагаааааагаааааааааааасаааа! 
ЧУ >>> conn.debug object ('test' ) 
=! ; шант, ('encoding': 'linkedlist', 'refcount': 1, 'lru seconds idie': 0, 
许 大 小 的 元 素 被 推 'Iru': 274853, 'at': 'Oxb6c9£120', 'serializedlength': 17, 
入 列表 里 面 的 时 'type': 'Value') 
候 ， 列 表 将 从 压缩 当 压 缩 列 表 被 转 欣 为 普通 的 结构 之 后 , 即使 
列表 编码 转换 为 标 结构 将 来 重新 满足 配置 选项 设置 的 限制 条 
准 的 链表 。 件 ， 结 构 也 不 会 重新 转换 同 压缩 列表 。 
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set-max-intset-entries 512 «оо ЕМЛЕ 5 


示 的 限制 条 件 。 


UU000000000000000000000RedisUUUUUU0U0000000000000 
0009-Ф000000000000000000000000000000000000000 


UUUU9-4 ОО00000000000000000000000 


>>> conn.sadd('set-object', "капде(500)) 
500 
ІЙ ANR- 
ҚИЯН Ж ЗЕДІ 500 >>> conn,debug object ('set-object ' ) 
个 元 素 ， 它 的 编码 仍 f'encoding': 'intset', 'refcount': 1, 'lru seconds idle': 0, 
然 为 整数 集合 。 '1ги': 283116, 'at': 'Oxb6dlalcO', 'serializedlength': 1010, 


'tvpe': 'Value') 

>>> conn.sadd('set-object', tranqe(500, 1000)) 
500 

>>> conn.debug object ('set-object') 


f'encoding': 'hashtable', 'refcount': 1, 'lru seconds idle': 0, 
'lru': 283118, 'at': 'охрбала1с0', 'serializedlength': 2874, 
itvpe': 'Value') 


当 集合 的 元 素数 量 超过 限定 的 512 个 时 ， 
整数 集合 将 被 转换 为 散 列 表 表 示 。 
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length, passes, psize): 
通过 流水 线 来 降低 网 络 通信 给 
< 测试 带 来 的 影响 。 

根据 passes 参数 米 决定 
й 每 个 流水 线 操 作者 包含 了 


сопп.д2е1есе (key)‏ 2 ق ر 
行 性 能 测试 ， 函数 需 b conn.rpush (key, *range (length) )‏ 
要 对 所 有 测试 指标 进‏ 


为 了 以 不 同 的 方式 进 8 def long ziplist performance (conn, key, 
сопп.ріре1іпе (False) 
行 参 数 化 处 理 。 


Pipeline = 


t = time.time() < 启动 计时 器 。 
for р іп xrange (passes): < 
ЖИНЕП, ШИЕ for pi іп xrange(psize): 

测试 数据 的 准确 性 。 | p pipeline.rpoplpush(kev, key) 
— pipeline.execute() 


psize IK RPOPLPUSH ff 
令 调用 。 








хто ы ы 
通过 从 右 端 推 人 指定 return (passes * psize) / (time.time() - t or .001) 
数量 的 元 素来 对 列表 
进行 初始 化 。 
执行 psize 次 计算 每 秒 执行 的 
每 个 rpop1push () 函数 调用 ی ا‎ 命令 RPOPLPUSH 调用 
пренрлро міну ложка, ý 数量 
并 将 它 排 人 同一 个 列表 的 左 端 。 
>>> long ziplist performance(conn, 'list', 1, 1000, 100) | 
52093.558416505381 当 压 缩 列表 编码 的 列表 包 
>>> long ziplist performance (conn, 'list', 100, 1000, 100) 含 的 节点 数量 不 超过 1000 
51501.154762768667 个 时 ，Redis 每 秒 可 以 执行 
>>> long ziplist performance(conn, 'list', 1000, 1000, 100) ë ; 
49732.490843316067 大 约 5 万 次 操作 。 
>>> long ziplist performance (conn, 'list', 5000, 1000, 100) 
43424.056529592635 
>>> long ziplist performance(conn, 'list', 10000, 1000, 100) ма JE: | =E 
36727.062573334966 LTAQA 
>>> long ziplist performance(conn, 'list', 50000, 1000, 100) 列表 包 合 УРА 
16695.140684975777 БАЗ 5000 个 以 上 
>>> long ziplist performance(conn, 'list', 100000, 500, 100) 时 ， 内 存 复制 带 来 的 
553.10821080054586 消耗 就 会 越 来 越 大 ， 
当 压缩 列表 的 节点 数量 达 当 节点 数量 达到 10 чі, нен | | 号 致 性 能 了 降 。 
到 5 万 个 时 , 性 能 出 现 明显 列表 的 性 能 低 得 根木 没 法 用 了 。 
下 降 。 
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0000000009 .1000000000000000000000000000000Х0000У000 
ООООХООООУ : Озћа газарроо 


0000000 OU0UUUULuaUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
ОДОД0000000002 100001 аоопоооропороооооообообоб000000 
ОДОДОО000000000000000000 


ОД0000000 О000000000000000000оабооо000000000000 
ППППППППППППППППИПППП?ВАКСЕП СВАМСЕВУ5СОВЕГ 28АМКЦ 
ZCOUNT[] СВЕМВАМСЕП 2КЕМКАМСЕВҮЅСОКЕЦО000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000 


ОДООД0000000000000000000000000000000000МО00МО0О 
0000000000009..2.100000000000000000000000000000000000 


ООО00000000002А000000000000000000000278Е2МААМСЕВУВАМК 
ОДООО000000000000 


ППППППзеагсһ іпаехо000000000000000000000000000000 


ОО000000000000000000000000000000000000000 
ZUNIONSTOREDDDZREMRANGEBYRANKDDDD 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUU 


9.2.1 DOODO 


О000000000000000000000000005.300000000001РО00000 
ПООО0000000000001РО000000001РОО000000000000000000000 
О10001000000000000201208000000000000000000000003700 
ОДООД000000000000000000 


ОДООООО0ОД000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
ОДООО00000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОТОБООД000000000000000000000000009-7000000000000000 
UUUbase кеуДДОДОООО0000000000000000 


00009-7 О000000000000000000000 


在 调用 shard кеу () РАХЕ, 用户 需要 给 定 基础 散 列 的 名 


HE Кайнар 
е T EDEP BII ET BEJG 
+, WA EHRE 及 请 求 的 分 片 数量 。 

接 用 于 计算 分 片 四 def shard kev(base, key, total elements, shard_size): < 
3 і о if іѕіпѕіапсе (кеу, (int, long)) or kev.isdigit(): 


整数 键 将 被 程序 假定 为 一 说 shard ід = int(str(key), 10) // shard size 
else: 


连续 指派 的 ID ， 并 基于 $ н 

shards = 2 % total elements // shard size «~ 
这 个 整数 二 进 制 位 Рт XT Siapa B: 
这 人 ID 的 milf reb. shard іа = binascii.crc32(kev) $ shards ш 





的 高 位 来 选择 分 片 Ір, return "55:55"5 (base, shard id) BE, 程序 将 基于 
此 外 , 程序 在 进行 五 数 转 预计 的 元 素 总 数 
换 的 时 候 还 使 用 了 显 式 | 在 得 知 了 分 片 的 数量 之 后 ， 程 序 最 后 , 程序 会 把 基础 量 以 及 请 求 的 分 
的 基数 (以 及 str () В 就 可 以 通过 计算 键 的 散 列 值 与 分 键 和 分 片 ID 组 合 在 片 数量 ， 计 算出 
数 ) , 使 得 键 010 可 以 被 | 片 数量 之 间 的 模 数 来 得 到 分 片 DD。 .起 ， 得 出 分 片 键 。 实际 所 需 的 分 片 
转换 为 10， 而 不 是 8。 总 数量 。 


О0000000ОО5ћа га_кеу ( ) ОООООООООСКСЗ 200000000000 
СЕСЗ 20000000000000000000000000000000000000000МО0500 
УНА ООООООСКСЗ 2000000000000000000000000000000 


ППёоїаі elementslshard _ sizeUUUU 00000000000000 
total etementsUUUshard_ 512 е10000000000000000000000о 
ОООО00000000000001000000005Пага 5і2ебОб 
total elementsijshard 5і12еооО ПОДООООДОДОДОО00000000000 


ОДООООД000000000000000000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU /万 
UreshardingUUUUUUUUUUUUUUUUDUD 


00009-800000000005 а га кеу ( ) П0000000100000000000 
ОН5ЕТОООНСЕТОДОООО 


00009-8  ПДООН5ЕТОДОНСЕТОГ 


def shard hset (conn, base, key, value, total elements, shard size): 
shard - shard kev(base, kev, total elements, shard size) 


return conn.hset (shard, key, value) 4— 计算 出 应 该 出 哪 

个 分 片 来 存储 值 。 
将 值 存储 到 分 片 里 面 。 
def shard hget(conn, base, key, total elements, shard size): 
shard - shard kev(base, kev, total elements, shard size) <- 
return conn.hget (shard, key) а 计算 出 值 可 能 被 存储 
4 тк? ~ 1. 
ТТІ 到 了 哪个 分 片 里 而 。 


ОДОД00000000005Ппага hset( ) ОО00000000000000000000 
UUUUUU000000shard_hget () ВО0000000000000000000000000 
ОО0000000000001РО0000000000000000000000000000000 
Н5ЕТОДОДОНСЕТОДОДООДД5Пага ћѕеї ( ) П005һага һдеї()р 
0000009-900000000000000000 


00009-9 О0001РО00000000 


TOTAL SIZE = 320000 


SHARD SIZE = 1024 把 传递 给 分 片 函 数 的 参数 设置 
| 为 全 局 常量 ， 确 保 每 次 传递 的 


def import cities to redis(conn, filename): 


为 了 对 数据 进行 设 for гом іп csv.reader(open(filename)): 值 总 是 相同 的 。 

置 ， 用 户 需 要 传递 se Tra KA 程序 在 获取 数 

TOTAL SIZE 参数 s аха set (сопп, ES EE г сісу id, 据 时 ， 需要 根据 
=a жы di json .dumps ( [city, region, countrv)), кы 

ЖІ SHARD 5125 2 TOTAL SIZE, SHARD SIZE) 相同 的 TOTAL. 

数 。 不 过 因为 这 个 | ; ир | SIZE 参数 和 

程序 处 理 的 ID 都 是 def find citv Бу ір(сопп, ip address): SHARD SIZE 

数字 ， 所 以 ТОТАЇ | data = shard hget(conn, 'cityid2city:', citv id, | | вжи 

SIZE 实际 上 并 没 TOTAL SIZE, SHARD SIZE) 片 的 键 。 

有 被 使 用 。 return json.loads (data) 


D000640000000000000000000000000000044 м800000000 
00009-90000000000һаѕһ -тах - 21р1 151 -еп 1 геѕ50000010240 
пазћ-тах -21р1 151 - матие)0000256ПОД000000000000000/00 
00000 15 900000000000 + 2 MBUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О00000000799: ОДОО000000000000000000000003.50000000 


ОДО00000000  ООО00000000000000000000000000000000 
0000000000Опатезрасе : іаП000000000000000000000000000 
ОДОДООО000000000000000 


ОДО00000000 


ПОДООООДОО0О00000000000000000000000000000000000 
ОПООНОЕСОНІМСАВУПНІМСАВУРІОАТОГО 


ОДООДО0О000000000000000000000000000000000000000000 
ОДОО0000000000 


9.2.2 ППП 


01000600000000МарАеаисеПо0000000000000000000000 
О00000000000000000МарКеаисеробо00000000000000000000 
О00000000000000000006еаіѕП0000000000000000000000000 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000 


D000000000000000000000000002000000cookieDODUUIDOO 
ООО00000000000991000000000000099100000009.2.1000000 
ОДООООО000000000000000000000000000000000000000000000 
UUUIPUUUUUUUUUUUIDPUUUUUUUUUUUUUUUUUUUUUIPUU120U000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUIDPUU 
15 000000000000 


ОДОООО0000000991001500000000000000009910000000000 
ООО00000000001 28000000000000000000000002. 80009910 
0002 600000000000000000У91000000360000090000000У910 
002 50000000" О00000000000000000000000000000800000000 
ОДООООО000000000000000000000000000000000000000000000 
00 


0000000----000009910002 50000000С00000000000000000 
LIL llbirthday соїїїзі'опПД000000000001280000000056000 
ОДООООО00000000000000000000000000000000000000000000 
ОО0000000000000002.500000000560000000000000019600000 
00000000002. 500000000000001 000001000000000000000000 
02.50000000000002 7390000000010000000 


ОДДО09Ч1ОДрО05600000000000000000000005А0000000000 
О00000000000009-10000000005А0000000000009.2.10000000 
ООО000000000000000000000000010000000000000000056000 
ІОО00000000000000000(рО00000056000100000000000000 


00009-10 ПООО0000000000000005АрОП0 


def shard sadd(conn, base, member, total elements, shard size): 
shard = shard Кеу(разе, 
'x'astr (member) , total elements, shard size) 计算 成 员 应 该 被 存储 到 哪个 
return conn.sadd(shard, member) <— 分 片 集合 里 面 ; 因为 成 员 并 
非 连 续 ID， 所 以 程序 在 计算 
成 员 所 属 的 分 片 之 前 ,会 先 
将 成 员 转 换 为 字符 串 。 


将 成 员 存储 到 分 片 里 面 。 


ОО0000005АРОППО0000000000000000000000000000000000 
ООДОО00009910000005600010000000000190000000000000000 
000000000000000200000009-120000000000000000000 


00009-11 000000000000000 


SHARD SIZE = 512 


= 
为 整数 集合 编码 的 集合 预 


取得 当天 的 日 期 ， и TERET 
e a saa wl i 
数 器 的 键 。 | key = 'unique:%s'%today.iscformat() 根据 128 位 的 
[> expected = get expected(conn, key, today) UUID, 计算 出 
获取 或 者 计算 当天 的 | id = int(session 14.керјасе('-', '')[:15], 16) 一 个 5 位 的 ID。 
了 预计 唯一 访客 人 数 . if shard sadd(conn, key, id, expected, SHARD SIZE): 
"жаканы | сопп.іпсг (кеу) 如 果 ID 在 分 片 集合 里面 
era 并 不 存在 , 那么 对 唯一 访 
kaka 客 计数 器 执行 加 1 操作 。 





соипї №1511 ( ) ПОООООООООООООООООООООО00000000 
get expected( ) ППОДООООД0О0000000000000УУеББОДО00000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 
10000000000000000 


ОДООД00000000000000000000000000000000000000000000 
ОДО000000000000000000000000000000000000005095000000 
00000000000000200000009-120000000000000000000 


00009-12  0000000000000000000000000 


ПАТТУ EXPECTED = 1000000 < 
EXPECTED = Í) 


这 个 初始 的 预计 每 日 访客 人 数 会 
设置 得 稍微 比较 高 一 些 。 al 在 本 地 存储 一 份 计算 得 出 
的 预计 访客 人 数 副 本 ， 


def дес expectediconn, key, today): 


如 果 其 他 客户 端 已 经 
计算 出 了 当日 的 预计 
访客 人 数 , ВУНЕ 

用 已 计算 出 的 数字 。 > 
基于 “明天 的 访客 人 数 至 少 会 
比 今天 的 访客 人 数 多 50%” 
这 一 假设 , 给 昨天 的 访客 人 数 
加 上 50%, ЯЛЫ АФ 
下 一 个 底数 为 2 МЖ. 


— 
将 计算 出 的 预计 访客 人 数 


TJA Redis 里 面 , 以 便 其 他 
程序 在 有 需 上 要 时 使 用 。 


if key іп EXPECTED: 如 果 程 序 已 经 计算 出 或 者 获取 到 了 当日 的 预 
return ЕХРЕСТЕР [кеу] 计 访客 人 数 ， 那 么 直接 使 用 已 计算 出 的 数字 。 
exkev = key + ':expected' 
expected = conn.get (exkev) 获取 昨天 的 唯一 访客 人 数 , 如 果 该 
| 数值 不 存在 就 使 用 默认 值 100 万 。 
if not expected: 
yesterday = (today - timedelta(davssi)) .isoformat () 





expected = conn.get('unique:šs'%yesterday) 
expected = int (expected or DAILY EXPECTED) 





д> expected = 2**int(math.ceil(math.log(expected*1.5, 2))) 


if псі conn.setnxiexkev, expected): 





expected = сопп.дес (ехКеу) <1 如 果 在 我 们 之 前 ， 已 经 有 
| 其 他 客户 端 存储 了 当日 的 
EXPECTED [key] = int (expected) FFEN м 
return ноен а Монж АЗ, ЖАН 
将 当日 的 预计 访客 人 数 记录 “МТК. 
到 本 地 副本 里 面 ， 并 将 它 返 
回 给 调用 者 。 


деї ехрес+еа ( ) ППООООО000000000000000000000000000 
О00000000000000000000000050%0000000000000200000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


00 


0UU0000000000100000000000RedisUUUUUU09.2 МВОДО000 
010000000000000000000056000100000000000000056 мвоо 
обррор00000000000839 ПОООО00000000000000000000000 


5.500000 


UUUUUUUUUUUUAPI 


ОООО0О000000000005А0000000000000000000000000 
ОДОО5АООООДООДООД05КЕМОДО5Т15МЕМВЕВООДОООООО000000 
ОДОД000000000000000051геббороророброророробо001 200 
ОООООО0100000000000000000051М ТЕВ5 ТОКЕПОО 
SUNIONSTORE(LILISDIFFSTORETJLILI 


ООД0000000000 OOUUUIPUUUUIPUUUUIDPUUUUUIPUUUUUUU 
ОО0000000000000001000000000000000000000000000000000 
IDOUULbiItmapUUUOUUUUUUUNttps://github.com/Doist/ 
bitmapist ПОРУЕПопПОДОООДОПОДОООООО0О000000000000000000 


ОДООООО00000000000000000000000000000000000000000 
ОДО000000000 


ПППеРЧВуу/.СОМППППерОВиу. СОМ 00000 
LLLILLILLLILLILU 


9.3 ПОО00000000 


9.1000000000000000000000000000000000000 
namespace: іЧООДОДООДО00000000000000000000000000000 
ОДОДОД0000000000000000000000000100000000000000000000 
ОДО00000000 


UU00000URedisUUUUUUUUUUUIPUUUUUUUUUUUUUUUUUUUUUUD 
UUU000000000000000000RedisUUUUUU0UTwitterUU00000000000 


UUU00000000000000000000000000Redis000040UUUUUUDUD 
бЕТКАМСЕЦЦПП5ЕТКАМСЕПППбЕТВТТЦПЦПП5$ЕТВТТПЦППбЕТКАМСЕЦППП 
UUUUUU000000000UUU>ETRANCEOUUUUUUUUUUU000UUUUUUUUUUU 
ООДО000СЕТВІТООООООООООООДОО0О00005ЕТВІТОДООООООО000 
оробрбррбр00004000000000000000000000000Веаї 00000 
ООООО0000000000000000000000000000040000000000000000 
О000000 


9.3.1 000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДД000000010000000000000000000000000000000000000020 
ООД000000000000000000000000000000000000030000000000 


ООДОО0ОО00000000000000000000000000400000000000000000 
О000000000000000002000600000 


О00000000000000000000000000000000000002000000000 
О0000000000/00000000000009-13З00000000000000000/50300 
ОО0000000000000000/0000 


00009-13 ПОООО00000000000000000000000 


COUNTRIES = ''! 

АВИ ЛЕС АСС АТА АГА ALB AND АВЕ ARG ARM ASM ATA ATF АТС AUS AUT AZE BDI 
BEL BEN BES BFA BGD BGR ВНЕ BHS ВІН BLM BLR BLZ ВМО BOL BRA ВЕЗ BRN BTN 
BVT ВЛА CAF CAN ССК CHE CHL CHN СТУ СМЕ COD СОС СОК COL СОМ CPV СЕТ СОВ 
CUW CXR СУМ СҮР CZE DEU 001 ОМА DNK СОМ DZA ECU EGY ЕК1 ESH ESE EST ЕТН 
FIN FJI FLK FRA FRO FSM GAB GBR GEO СОУ GHA СІВ СІМ GLP GMB СЫЗ GNO GRC 
GRD GRL атм СПЕ СОМ GUY HKG HMD HND HRV НТІ НОМ IDN IMN IND ТОТ IRL IRN 
IRQ ISL ISR ITA САМ JEY JOR JPN KAZ КЕМ KGZ КНМ KIR КМА KOR KWT LAO LBN 
LBR ІРУ LCA LIE LKA LSO LTU LUX LVA МАС МАЕ MAR MCO MDA МІС Мру МЕХ MHL 
MKD MLI MLT MMR MNE MNG MNP MOZ МЕТ MSR MTQ MUS MWI MYS MYT МАМ NCL NER 
NFK МСА NIC NIU NLD NOR NPL NRU NZL CMN РАК PAN PCN PER PHL PLW PNG РОЇ, 
РКІ PRK PRT PRY PSE PYF QAT REU ROU RUS RWA SAU SDN SEN SGP SGS SHN SJM 
SLB SLE SLV SMR SOM SPM SRB SSD STP SUR SVK SUN SWE SWZ SXM SYC SYR TCA 
TCD TGO THA TJK TKL TKM TLS TON TTO TUN TUR TUV TWN TZA UGA UKR UMI URY 


{> USA UZB МАТ УСТ VEN VGB МІК VNM VUT WLF ИЗМ YEM ZAF ZMB 2МЕ''' split) 
STATES = Í фе адио 
"САМ':'''АВ ВС МВ NB NL NS МТ NU ON РЕ ОС SK YT, split( 
'Џ5А':'''АА ДЕ AK AL AP AR AS AZ CA СО CT DC DE FL FM СА =: НІ ІА ID 
IL ТМ KS КҮ ГА МА МГ МЕ МН МІ ММ МО МР MS МТ NC ND МЕ МН NJ NM NV NY ОН 
ОК OR РА РЕ ЕМ RI SC SD ТМ TX UT МА МІ УТ WA WI МУ WY tt Split (), 
) MI 
— EH ISO3 国家 (或 地 区 ) НЕНЕН, JR split) 函数 会 根据 空 “。。 美国 各 个 州 的 信息 
白 对 这 个 字符 申 进 行 分 制 ， 并 将 它 转换 为 一 个 由 国家 (或 地 区 ) 编码 组 成 的 列表 。 





00009-1З0000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОООО00000000000000000000000000000005 р Lit 00000 


split (0) ООООД00000000000000000000000000000000000000 
ОДООООО0000000000000000000000000000000 


00000001399600610000000009.5.000000000Саїібогліар)б 
ОООО000000000000000000000000000000002000000000000000 
ОДО0І5ОЗПО0О0000000С00МТАТЕ5ПООООООО0ОО000000000000000 
ООООО000000000000000000000000000000000000000000000 
0000000000000000000139960061000000000000000000 
СОУМТВІЕ5ПОООО00000000007 USA" В0000000000000000 
STATES [ "USA" ILIDLIDLILLILLILLILCalifornialILIDLILLIL ' CA "0000000 
0109-14009еї code( )OO000000000000000000000000000000 
000020000000 


00009-14 ПОДООДОДООО0ОД000000000000000 





因为 Redis 里 面 的 未 初 т 找 B 家 
始 化 数据 在 返回 时 会 | def get code country, state): (或 地 区 ) 对 
被 转换 为 空 值 ， 所 以 我 cindex = bisect.bisect left (COUNTRIES, country) а | МЕЙЕР ЕЕ. 
4 CENTRA ыы if cindex > len (COUNTRIES) ог COUNTRIES [cindex] l- country: 
们 要 将 “未 找到 指定 国 | 
сіпдех = -1 
» tng НЛ г? | | 
т пе шмш; E 
区 P ре Р М віпдех - -1 区 ) 时 ， 将 其 索引 设置 为 -1。 
) DIRS EN 1, if state апа country іп STATES: 导 找 州 对 应 
尝试 取出 国家 【或 地 г> states = STATES [country] F mera ПА 
区 ) 对 应 的 州 信息 。 | sindex = bisect.bisect left(states, state) «ноз 的 侦 移 基 。 
像 处 理 “未 找到 指定 国 if sindex > len(states) or states [ѕіпдех] != state: 
家 ”时 的 情况 一 样 , 处 理 .ee | 
“未 找到 指定 州 ” 的 情况 。 chr () 函数 会 将 介 于 0 至 
return chr (cindex) + спг(віпдех) < 255 2 ЇН) 的 整数 值 转换 


为 对 应 的 ASCII 字符 。 
如 果 没 有 找到 指定 的 州 ， 那 么 索引 为 0; ШЖ 
找到 了 指定 的 州 ， 那 么 索引 大 于 0, 





ОДООО0000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000 


9.3.2 UUUUUUUU 


ПО00000000000000000000000000005ЕТКАМСЕПОО0000000 
ОО000000000000000000000000000000000000007\міег0000 
ОДО00000000 его! ФОО 7 .5000000007ммїєсег007.500000 
UUUUUU00000000001.2> а ворорбпорордорообррдропобобо000 
[IRedis[ 00000000000512Ммв00000Веаї ророророробо000000 
О00000000000000000006еаіѕП0000000000000000000000000 
ПО0000000000000000000005ЕТВІТООООО00000000000000000 
009.2.100000000000000000000000 


О00000000000000000000000000000000Аеаіѕ$П000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОДООООД00000000000000000000000000000000000000000----0 
ОООО0О00000000000000000000000000000000000000 Twittert) 
D00000000000000000000002“*00000000000000000000010000 
UUUUUU0000000000U0< М800000009-150000000000000000000 


00009-15  ПООООООО00000000000000000 








USERS PER SHARD = 2%%20 سل‎ + ISMAR H- 
取得 用 户 所 在 位 ا‎ | 设置 每 个 分 月 
置 的 编码 def set location(conn, user id, countrv, state): | 的 大 小 。 
code = get code(countrv, state) 
查找 分 片 ID 以 及 e shard id, position = divmod(user id, USERS PER SHARD) 
用 户 在 指定 分 片 offset = position * 2 计算 用 户 数据 
中 的 位 置 。 pipe = conn.pipeline (False) 的 偏 移 量 
将 用 户 的 位 置信 息 存 > pipe.setrange('location:%s'%shard id, offset, code) š 
Мо 1 WA E ЕН 
储 到 经 过 分 片 处 理 的 Екеу = str(uuid.uuid4()) 
е $ pipe.zadd(tkev, 'max', user id) 对 记录 目前 已 知 最 
位 置 表格 里 面 。 pipe.zunionstore('location:max', 大 用 户 ID HH FEE 
Itkev, 'location:max'], aggregate='max') „МЕН. 
合 进 行 更 新 。 


pipe.delete (tkev) 


pipe.execute() 


set Location( ) ППОООООО00000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООДОО0000000190000000000000000000000000000000000000 
ОДОДОД00000000001/90000000000000 


9.3.3 000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДО00000000 


ОДОДОДОД0000000000000000к6. 6.40000000000000000000 
ОгеадоТоск5 ( ) П0000000000000000000000000000Аеаіѕр000 
ОДОДОО0000000000000000009-16П00000000000000000000000 
readblocks ( ) 0000 


00009-16 0000000000000000000 


初始 化 黄 个 特殊 结构 ， 以 使 快速 地 
对 已 存在 的 计数 器 以 及 缺失 的 计数 
获取 目前 已 知 的 最 大 def aggregate_location (conn): 器 进行 更 新 。 | 
用 户 ID, 并 使 用 它 来 countries = defaultdict (int) 
计算 出 程序 需要 访问 states = defaultdict (lambda :defaultdict (int)) 
的 最 大 分 片 ID。 max id = int (conn. zscore ('location:max', 'max')) 


max_block = max_id // USERS_PER_SHARD 





..... i 每 
一 个 接 一 个 地 处 理 一 上 for shard id іп xrange(max block + 1): 读 取 分 片 中 的 每 个 块 
每 个 分 片 ……: for block in readblocks (conn, 'location:%s'%shard_ id): 4 
for offset in xrange(0, len(block)-1, 2): 


=: code = block[offset:offset+2] 
从 块 里 面 提取 出 各 个 编 : 
update_aggregates (countries, states, [code]) 


码 , 并 根据 编码 查找 原始 4 
的 位 置信 息 ， 然后 对 这 些 return countries, states 对 聚合 数据 进行 更 新 。 


位 置信 息 进行 聚合 计算 。 


UU0000000000000000000000000000UUUdefautLtdictDOUUU 
eUUUUUUUUUUUUUUUUUUUURedisUUUUUUUUUUUUUDUD 
aggreate Тосаїіоп ()ОДО0000000000009-1 70000000000000 
ОООД0О0000000000000015О0ЗОД000000000000000000 


00009-17 ПО000000000000000 


def update_aggregates (countries, states, codes): 
如 果 国 家 ( 或 for code іп codes: 








地 区 ) 所 处 的 іо ге ады 只 对 合法 的 编码 进行 查找 。 
偏 移 量 不 在 continue 
合法 范围 之 country = ord(code[0]) - 1 计算 出 国家 ( 或 地 区 ) 和 州 在 查找 表格 
内 ,那么 跳 过 | state = ord(code[1]) - 1 中 的 实际 偏 移 量 。 
这 个 编码 。 if country < 0 or country >= len (COUNTRIES): 
ң continues 获取 1503 国家 
在 对 国家 (或 р кай чих 
地 区 ) 信息 进 country = COUNTRIES [country] (或 地 区 ) 编码 。 
行 解码 之 后 ЖЕ т: countries [country] += 1 
Је з 
把 用 户 计 人 这 if country not in STATES: 
个 国家 对 应 的 continue асатын 
计数 器 里 面 。 if state < 0 or state >= STATES [country] : 如 有 果 程 序 没有 找到 
Continue 指定 的 州 信息 , 或 
22 > state = STATES[country] [state] 者 查找 州 信息 时 的 
қ "рою states[country] [state] += 1 偏 移 量 不 在 合法 的 
对 州 计数 带 执 范围 之 内 ， 那 么 跳 
ТІЛІ 1 操作。 过 这 个 编码 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
ОООО000000000000000000000000000 мм'єсеРорООООД0000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
00000009-18000000000000190000000000000000000000 


ОДООООО00000000000000000000000000000000000000000 
ООДО000000000000000000000000000006Е2ТВІТООО5ЕТВІТОДОО 
ОДООО00000000000000000 


00009-18 | ПОДОДООИФО0О0000000000 


和 之 前 一 样 ， 设 
置 好 基本 的 聚合 
数据 。 





查找 用 户 位 置信 息 所 
在 分 片 的 Тр, АМЕ 
息 在 分 片 中 的 偏 移 量 。 


每 处 理 1000 个 请 求 ， 
程序 就 会 调用 之 前 定 
义 的 辅助 函数 对 聚合 
数据 进行 一 次 更 新 。 


对 遍历 余下 的 最 后 一 
批 用 户 进行 处 理 。 


def aggregate location list(conn, user ids): 


pipe = conn.pipeline (False) 


countries = defaultdict (int) 设置 流水 线 ， MPa 
states = defaultdict (lambda: defaultdict (int)) 作 执 行 过 程 中 与 Redis 
的 通信 往返 次 数 。 


for i, user id іп enumerate (user ids): 
shard id, position - divmod(user id, USERS PER SHARD) 
offset = position % 2 


pipe.substr('location:żs'żshard id, offset, offset+1) <- 


if (1+1) $ 1000 == 0: 
update aggregates (countries, states, pipe.execute()) 


update aggregates (countries, states, pipe.execute()) 


return countries, states 4—4 Бя МК АО 
令 ， 获 取 用 户 的 位 置信 息 。 





返回 聚合 数据 。 


IILIIlePUBw.COMI ILilijePUBw.COM ООП 


UUUUUUUUUUDD 


9.4 ШШ 


О05000000000000006еаіѕ00000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUU0U000000000000000000000000UUUUUUUUUUUUURedisDD 
UUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDO 
UUU000000000000RedisUUUUU00000000 


® ДОДАОРОДОООООО0000004000000 


© 00000000000000000RedisU00000000010000UUUUUUUUUUU 
UUUURedisUUUUUUUUUUUUUUUU000D00 


Э 00000UUIPUUUPythonUuuidUUUUUuuid4()DUUUUUUUIDDOUD 
О00000000000УОІОЦО0' 4df07f45-ff2c-4057-9667 - 
4925543ебраз ПДОДОООДООД0360А5СПДДДООО000000360000 
一 一 ULUUU 


© ДОбОДО000000000056000000006400000000000Веаї000 
ОДО00000640000000000000000000000006400000000000000 


О0500000000000000000000Руёһоп05+ гис+0000000000090000 
0000 


дорбеРювм. сОМІДДДерРувм. СОМ ПОД 
ОО000000000000 


0100] DHRedis 


000000 


• 00000 
e ПО000000000 
e 0000000 


О0Аеаіѕ0000000000000АеаіѕВО0О0000000000000000000 
О05000000000000000000000000АеаіѕВо0080000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUU 


UUUU00U00000RedisUUUUUUUUUUUUUUUUUUU0000000Redis0 
D00000000000Redis0000000000000000 


дорбеРовм. сОМІДОДерРувм. СОМ ПППП 
О000000000000 


10.1 0000 


О000080000000 TwitterUUUUUUUUUUUU000000000000000000 
ОДОДООО0000000000000000000000000000000000000000000 
зодрроборобобр00000веаї ор О000000003 000010 000000 
ОДООООО000000000000000000000000000000000000000000000 
О000000000000000000000000000К6еаіѕ=р00000000000000000 
О000000кеаіѕ000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUURedisUUUUUUUUUUUUDUD 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUU 


• ПОООӘПООООООО00000000000000000000000000 

e ООООО0ОДОДООО0ОДОДООД00О000000000000000000000000000 
ОДООД0О00000000000000000000000000000000000000 

。UUUUUUUUUUURedisUUUUUUUUUUUUUUUUUUUUU00U000000000 
000000124092ірПо2ір2П00000000000000000000000000000 
ILU 

e ДОДФ0ДОД00000000000000000000000000000000 


ООДОД0000000000000000000000000000000000000070000 
D0000000”00000000Redis0Q000000000000000000000004000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО000000000000000000 


0000000000000 ОО000000000000000000Аеаіѕ 000000 
О0000000000000000000000Аеаіѕ$=00000000000000000000000 
П00000000000000000010.3.1000000000000000000000000000 
ОДООООО000000000000000000000000000000000 


Д4000000000000геріісаєіюопрОДОДООДОООКеаїЬОДОООО0О 
О000000000000000000000000000000000000000000Аеаіѕ=000 
ОО00000000000Аеаіѕ=00000000000051ауео? host рог 000 
Пћоѕ%Прог+ПООО000000000000ІРО0000000000000000000000 
О0000000Аеаіѕ=00005ГАМЕОР host рогеДООДОДООО0000000 
ОДООООО000000000000000000000000000000000000000000000 
DULISLAVEOF по оперббОДОО000000000000000000 


Др00веадї ор ООД000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000 


UUUUUUUUUUresyncUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
О00000000000010-100000000000000000000004000000 


ERS iE 


| سے 


从 服务 器 1 从 服务 器 2 从 服务 器 3 





从 服务 器 a ”从 服务 器 b ”从 服务 器 c 从 服务 嚣 d 从 服务 器 e 从 服务 器 f 从 服务 器 g9 从 服务 器 h 从 服务 器 i 


010-1 ППКеаіѕ0000000000000090000000000000030000000000 





О0000000000000000009аѓа сепёегуу00000000000000000 
ОООО000000000%УАМОПОО0О00000000000000000000000000000 
ОДОДООО0000000000000000000000000000000000000000000 
Осороїоду ПОороДОбОДОДО000000000 


ОДООООО0ОДр00000000000000000000000000000000000000 
ОрО000000000Веаї ро0000000055Н000си ппеїоо000000000 
ОООО0000000000000000000000000000000000021 MbitUUU1.8 


МОДА: /га пд. bz/2 мУДООДО0000000000000000000055Н00 
000055НО000000000000 


0000000 О00000055Н00000000000000000000000002.6 
онгдрор0000200000000000000000000000000А5-1280000 
180 МВОДООООДПАСАОО000000000000000350 мврооооооооооо 
UU0000gigabitUUUUUUUUUUUUU00000000000000000000000U0UU 
00000000000----0055Н00000092і00000055НО000000000000 
О0000000000000000055НД000000012000000000002.6 GHz ПП 
00000000000000000024052 мвудоркеаї Ов о вороррдб000000 
Орр000000000060080 MBUUUURedisUAOFUUUU0U000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ООООО00О0000000000000000000000000050050000005000000 
10000000000000000010%020%П00000000100020300000000 
00900000000200050100000000000000000000500000017с0 
59 ПООДОООД00000000000000000020000 


ППОРЕМУРМОООО  ОДОДООПАЄЗО ОІг0000Орепурмр0П 
ООО00000000055НОДООО0О00000000000000Орепурмродор000 
О00000000000000000000000000000000000000000репуРМ0 
Д1го000000010000000000000259е03096П000000000001200000 
ОДО0000000 


Redis >entinelUUUURedisUUUUUUUUUUUUUUUUUUUUDUD0DD 
Redis sentinelUUUUU0U000URedisUUUUUUUUUUUUURedisUUUUUD 
005епеїпеїПрорОООД0000000000000000000000000РУВІТ5НОП 
О50В5САІВЕПОО0000000000000РІМСП0005епёпеі000000000 
0000000005епії пеїбООДО0О00000000000000005епіїпеї 0000 
О0000000005епёіпеІ0000000000000000000000000000000000 
О00000000000005епёпеі0000000000000000000000000000 
005епёіпеІ00000000000000000000000000000000 


О000000Кеаіѕ ЅепїіпеО00000000000000000000000000 
О0000Аеаіѕ Ѕепёіпе0000000000000000000000000000000000 
ОДО0000000 


ОбОбОб00000000000000000000000000 
UUUUePUBw.COMINUUUePUBw.COM [0000 
ИШШШИШШИШШП 


10.2 UUUUUUUUUU 


О2П000000000000000000000%еоо0000Аеаіѕ$8000000000 
ОДОДООО00000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000 


00000  ОСОО0О00000000000000000000000000000000000 
Кеа дООООО0000000000веаї 00000 


Орр0000000Веаї  ПОООО0000000000000000000000900000 
ОДО0000000 


ОДООО0000000000000000000000000000000000000000000 
ОДООД00000000 


e ООООД0ОДОООО0000000000000000000000 

e ПОО000000000000000050000000000000000000000000000 
00 

e ДО60000000000Веаї  ророробороброробоо0об00000000000 
ОДООД000000000000000000 

• ОД6ПООДО0О0000000000000000000мАТСН/МО ТТ /ЕХЕСПООО 
00000000 + 100000бчароо 


e ПОПАОРОПООООООООО00000000000000000000000000000 
0000400 О00БООДбОДООООДООб0О0000000М800000000100 
00000001. КВОДО000000000000200 MBUUUU 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ведіїв ППОООДОДООО000000060000004000000000000000 
Оргеѕћага02560000000000000000020000000000000000000 
ОДООД00000000000000000000 


ОДОО000000000  ООО0О0000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДОД0000000000000000000000000000Веаї ПООООО00000000 
О000000000Аеаіѕ0000000Аеаіѕ0000000000000010.2.1000000 
О000000000000000000000000000000000000К6еаіѕ000000000 
ОО0000000000000000000000000000000000/АОРО00 


ОДООО00000000000000 


10.2.1 ПООООООО 


О5000000000000000000000000Аеаіѕ=00000000000000000 
РуєпопрО0000000000000000000000000000000000000000000 


ОДООООО000000000000000000000000000000000000000000000 
ОДО90000000000000000000000000000000 


ОДОДОД000000000000000000050000000000000000000 
Uconfiguration ІаусиіЇдОПДО00000000)50МмОр00000Кеаї 0000 
О0000000000000соп?і1д : redls:<component>DUUUUUUUUUUUUD 
О000000000000000000000000000000000000000000Аеаіѕ=000 
0000000020-1000 


000010-1 ОБОД0000000Веєі00000 


def get_redis_connection (component, wait-1): 
ема key = 'config:redis:' 4 component | 尝试 获取 旧 的 配置 。 
尝试 获取 old config = CONFIGS.get (key, object ()) а 
пене. | config = get_config( 
config_connection, 'redis', component, wait) 


if config != old config: 返回 用 户 
如 果 新 旧 配置 不 相 | REDIS CONNECTIONS [key] = redis.Redis (**config) 指定 的 连 


对 象 。 
FJ, 那么 创建 一 个 return REDIS CONNECTIONS.get {key) в 
新 的 连接 о 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000 


UU000000000000000000000000000RedisU0000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОООО0000000000000000000000000000000010398500000700000 
О000соп 119 : redis: logs: 70000000000000000000000000000 
000000 10-200000000000000000 


000010-2  ПОбОД0000000 


def get_sharded_connection(component, key, shard count, wait-1): 
shard = shard kevicomponent, 'х'+5 с (key), shard count, 2) <- 
> return get redis connection(shard, wait) 
SLA “ r. ағыт 
返回 连接 计算 出 “< 组 件 名 >:< 分 片 数字 > 
格式 的 分 片 Do 





10.2.2 ПОПОДОДОО000 


D000000000000000RedisQ00000 
get sharded connection ( ) ПООО0000000000050000000000 
get sharded connection( ) В00000000000000000000000000 
ОДО00000 


О0500000000000000003000000000000000000000500000 
О0000000000000000000000000Аеаіѕ$0000000000019-3000000 
UUUUUUUUUUUUUUU 


000010-3 D0000000000000 





创建 一 个 包 装饰 器 接受 组 件 名 以 及 预期 
装 器 ， 使 用 的 分 片 数 其 作为 参数 。 
它 去 装饰 传 def sharded_connection (component, shard count, wait-1): а 
人 的 函数 。 — def wrapper (function): 
efunctools .wraps (function) 
从 原始 两 数 里 def call(kev, targs, **kwargs): < 
面 复 制 一 些 有 conn = get sharded connection ( 创建 一 个 函数 ， 
用 的 元 信息 到 component, key, shard count, wait) 负责 计算 键 的 
козел { {> return function (conn, key, tarqs, **kwargs) 分 片 ID ， 并 对 
获取 分 片 连接 。 | | return wrapper | "нуз ERE HE 
ар рез : 8 ж {TEL o 
ар нання 返回 一 个 可 以 对 需要 分 片 连 。| | бно 





其 他 参数 传递 给 它 。 接 的 函数 进行 包装 的 函数 。 


sharded connection( ) П0000000000000000000 
count м151+ ( ) ПОООООООООО0000сочпё visit ( ) ОО00000000 
count visit ( ) О0О0000000000000000000000000 
get expected( ) ПОООООООООООО00000000000000000000 
ПгеиѕеП000000009еї expected( ) П000000000попѕћагаеа 
соппесіїоп0000010-40000000000000сочпї visit ( ) П00000 
О000000000000009еї expected( ) 000 


000000000000000000000 + е000000000000000000000 
ІБОМПППППППСОПТ10: гед 15: unique : ОП 


config: redis :unique: 1501600000000000000000000000000 
пдодоповеаїс д ОДОсопїі9: гед 15 : unique 


000010-4 ППППППППППППППсоштЕ міз5іє()00 


авһагдей connection ('unique', 16) < | Ж count visit () 函数 分 片 
def count visit(conn, session id): 到 16 台 机 器 上 面 执行 ， 执 行 所 
经 过 修改 的 get_ раю e p m ep м 得 的 结果 将 被 自动 地 分 片 到 每 
expected () 调用 。 key = 'unique:%s'%today.isoformat() ата sit l- 
> сопп2, expected = get_expected(key, today) РУШИ ТӨШЕР? 面 。 


id = int(session ід.геріасе('-', '')Ї:151, 16) 


使 用 get expect if shard_sadd(conn, key, id, expected, SHARD SIZE): 

е {> conn2.iner (key) Š г 
ed 0 函数 返回 的 非 Y XÎ get_expected () 函数 
分 片 连接 ， 对 唯一 агедіѕ соппессіоп('ипіаце') < 使 用 非 分 片 连接 。 


3 4— В def get ехресёеа (сопп, key, today): 
T Я ЕС 
十 数 器 执行 自 增 tall of the same function body as before, except the last line' 


return conn, EXPECTED [key] <- 返回 非 分 片 连接 ， 使 得 count visit() 
函数 可 以 在 有 需要 的 时 候 ， 对 唯一 计数 
器 执行 自 增 操 作 。 


D00000000000Redis000 О00000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 


О000000000Аеаіѕ000000000000000000000000000000000000 
О0000000000АОРҒО0000/ООО00000000000000000Аеаіѕ= 000000 
ОДООООО0О0000000000000000000000000000000000000000000 
ООДАОРО0О 


000000000000000  ОООО5ЕТВІТОВІТСООМТОВІТОРОРОДООО 
ООООООДООДОО00000000000000000000000000000000000 
Pvthont IIL https://github.com/Doist/bitmapistij 


ОДООООО000000000000000000000000000000000000000000 
Дкеадї  дОООООООД00О000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
00 


D000ePUBw.COMUNUUUePUBw.COM 00000 
ОО0000000000 


10.3 UUUUUUU 


UUU0000URedisUUUUUUUUUUUUUUUUUUUUU000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUU 


10.3.1 0000000 


О0070000000000050АТОП000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
О00000000000000000000000ачегу 5 амеррор000000000000 


10.1000000000000000000Redis00000000000000000000 
10.10000000001.0.1000000000000000007000000000000 
SUNIONSTORE(JSINTERSTOREJISDIFFSTORE(IZINTERSTORETJ 
20МІОМ5ТОКЕПООО000000000Кеаіѕ$0000000000006еаіѕ 2.6000 
О000000000007000000000000000 


UUURedis 2.600000000000000000000Кеаіѕ$=000000000000 
О00АеаіѕООООООООООООООООООООО0000000000000000000 
5 аме - геаа-оп1у0000000уеѕ0005 аме - read -on уб0000по 
О000000000000000Аеаіѕ$П00000000000000000000000000000 
ОООО0О0000000000000000000000000000000000000000000000 


ОООО0000000000000000000000000000000000000000У/еб00 
О00000000000%еооо0000000000Аеаіѕ$=00000000000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
О0000000000000000010.100000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОД00000000000000000000005саїе outUUUUUUUUUUUUUUUDUD 
ОДООООД00О0000000000000000000000000000000000000000000 
ОДО00000000 


10.3.2 UU 


ОДООО0000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
00 


ОДООО0000000000000000000000000000000000000000000 
О0Аеаіѕ0000000000000000000000000000000000000000 
10.3.10000000000 


ОДООООО000000000000000000000000000000000000000000 
ОООД000000000000000007000іпдех адоситепт ( ) 0000000000 


О00000000000000000000000000000000000000010-30000000 
ОДО0000000 


ОДООО0000000000000000000000000000000000000000000 
ПО000000508ТООО0000000000000000000000000000000000000 
О00000000000005086ТО000000000000 


10000508Т0000000000000 


ОДОДО00000000000000000000000000000000000000000700 
ППППзеагсһ and sort ( ) П0О0О0000000000000000000000100 
ОДООООО000000000000000000000000000000000000000000000 


ОЗ ПОДОО00000000000000000000000000000000000 
02000000000000000000 
ОЗОДОО00000000000000000000000000 
ОДООООО00р0000000000000000000000 


0000000000700005еагсй and sort ( ) 0000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
О000000000000000000000000000000000000000000000910 


10000000000000000000000000001.00000000000020-5000000 
ОДОООО000000000000000 


000010-5  ПО50В8ТООДОООООООДО0000000000000 


def search get values(conn, query, id-None, ttl-300, sort-'-updated', 
start-0, num-20): 
这 个 函数 接受 的 参数 与 search апа | 
sort () 函数 接受 的 完全 相同 。 


count, docids, id = search and sort( 首先 取得 搜索 操作 和 排 
сопп, query, id, ttl, sort, 0, start+num) 序 操作 的 执行 结果 。 


key = "Кр:йос:58" 
sort = sort.Istrip('t-T) 


pipe = conn.pipeline (False) 


for docid in docids: $ " қ у қ 
pipe.hget (kevżdocid, sort) | 根据 结果 的 排序 жоса 以 及 对 文 
sort_column = pipe.execute() | 方式 来 获取 数据 。 档 进 行 排 序 产 生 的 
data pairs = zip(docids, sort column) 数据 进行 配对 。 
return count, data pairs, id < 返回 结果 包含 的 文档 数量 排序 之 后 
£H 5 Ë =. : m 


的 搜索 结果 以 及 结果 的 缓存 ID。 


search get values()UUUUUU0000000UUUUUUUUU00000D0 
ОДООООО0000000000000000000000 


000000005еагсп get values ()000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ПППзеагсһ get уаїиез ( ) ОПОДООД0О000000000000000010-6 
OOU 


000010-6 ПООООООО00000000000 


def get_shard_results (component, shards, query, ids-None, ttl-300, 


准备 一 些 第 构 ， sort="-updated", start=0; num=20, wait=1): 
用 丁 存储 之 后 获 „= | | . 
取 的 数据 。 count = 0 程序 为 了 获知 自己 要 连接 的 服务 器 ， 
尝试 使 用 已 被 缓存 会 假定 所 有 分 片 服务 器 的 信息 都 记 
ed 录 在 一 个 标准 的 配置 位 置 里 耐 。 
SHAS; for shard іп xrange (shards): 

2: > conn = get redis connection('$s:$s'$(component, shard), wait) 
么 重新 执行 但 询 。 H с, d, i = search get values( 
获取 或 者 创建 _ 个 连 сопп, query, ids[shard], ttl, ES start, num) 
向 指定 分 片 的 连接 。 count += c 将 这 个 分 片 的 计算 结 

й data.extend(d) 果 与 所 有 其 他 分 片 的 把 所 有 分 片 的 原始 
获取 搜索 结果 以 及 它们 ids [shard] = i 计算 结果 进行 合并 。 计算 结果 返回 给 调 
的 排序 数据 。 return count, data, ids а 用 者 。 





get_shard_results ( ) 00000000000000000000000000000 
О00000000000000000000000000000000000000000000000000 
0000000009е+ shard results ( ) ПП 


ПОООО0000000 


Руєпопо0000000000000000000000Аеаіѕ= 00000000000 
О00000000000000000006еаіѕ000000000000000Руһопр 
О00000000000000000Аеаіѕ=00000000000000000000 
get shard results( ) ОПОДОДОДООО00000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000 
Omissing ДООООООДОООО00000000002 0-7 000000000000000000 


ОДООООО000000000000000 


000010-7 ПО00000000000000 


这 个 函数 需要 接 
受 所 有 分 片 参数 
和 搜索 参数 ， 这 
些 参 数 大 部 分 都 
会 被 传 给 底层 的 
Ж, ПТ 
数 本 身 只 会 用 到 
sort 参数 以 及 |_ 
搜索 偏 移 量 。 


获取 木 经 排 
序 的 分 片 搜 
RIAR o 





根据 sort 参数 对 


def to numeric key(data): 


搜索 结果 进行 排序 。| 


只 获取 用 户 指 
定 的 那 一 页 搜 
索 结 果 ; 


型 , 是 因为 这 种 类 型 可 以 合理 地 对 整 
数 和 浮 点 数 进行 转换 , 并 在 值 缺 失 或 


ЕРҮ: 
return Decimal (data [1] or '0!) 


| 这 时 之 所 以 使 用 Decimal 数字 类 


者 不 是 数字 值 的 时 候 , 返 同 默认 值 0。 


except: 
return Decimal ('0') 
1.3 E ° 
to string Кеу(даба): 总 是 返回 一 个 字符 中 ， 即 使 在 
return data[1] ог '' < 一 值 缺失 的 情况 下 ， 也 是 如 此 。 
search_shards (component, shards, query, ids=None, ttl=300, 


sort-'-updated', start=0, num-20, wait-1): 


count, data, ids = get shard results ( 
component, shards, query, ids, ttl, sort, start, пит, wait) 





reversed = sort.startswith('-') 

sort. = sort.strip(l-') 准备 好 进行 排序 

key = to numeric Кеу 所 需 s% 

if sort not in ('updated', 'id', 'created'): 所 需 的 各 个 参数 。 
key = to string key 

data. sort (kev-kev, reverse-reversed) 

EEE M 返回 被 选中 的 结果 , 其 

for доста, score in datalstart:start-num) : ey A 
results .append (docid) 中 包括 用 每 | 分 片 的 

ВЕРЕ ID 组 成 的 序列 。 
return count, results, ids 


О000000000000010-70000000000000Аеаіѕ$000000000000 
ОО0000000000000000000000000000РуёһопПресітаіВО00000 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
ОО0000000000100 


О000000000000050АТОВО00000000000000000АеаіѕП000 
ОДООООД00000000000000000000000000 


20000000000000000000 


ОДО508ТОДООООООДООДООООО0ОО00000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ILLIDSOR ТООООДООДООДОООДООО00О000000000000000000000000 
ОДООД00000000000000000 


ОООО000000000000070000000000П05еагсб and zsort()[ 
ООО000000000000000000000000000000010-8000 


000010-8  ПОООООООДООО0000000000000000000 








调用 底层 的 | 
аёакс апа def search get zset values(conn, query, id-None, ttl=300, update=1, | 
панії ` vote-0, start=0, num-20, desc-True): 

zsort() Ж, з 这 个 函数 接受 

获取 搜索 结果 的 count, г, id = search and zsort( search and 

缓存 ID 以 及 结果 | сопп, query, id, ttl, update, vote, 0, 1, desc) zsort () 函数 

包含 的 文档 数量 。 if desc: 所 需 的 全 部 参数 。 
data = conn.zrevrangelid, 0, start + пит - 1, withscores=True) 

获取 指定 的 搜 else: 

索 结 果 以 及 这 data = conn.zrange(id, 0, start + пит - 1, withscores-True) 

些 结果 的 分 值 。 return count, data, id сі 返回 搜索 结果 的 数量 、 搜索 结果 本 身 、 搜 

索 结果 的 分 值 以 及 搜索 结果 的 缓存 ID. 


0000010-5000000005еагсп get матиез () 00000 
search get zset values ( ) ППОО00000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО00000 


ОДООООО000000000000000000000000000000000000000000 
ОО00000000000000000000000000010-90000000000000 


000010-9 ПОООДО000000000000000000000000000 








і Је Т search shards zset (component, shards, query, ids-None, ttl=300, ЕЕ 
的 缓存 结果 ; update-1, vote=0, start=0, num-20, desc=True, wait-1): 
如 果 没 有 缓存 кй | 函数 需 此 接受 所 
кы, Ж Ġamm H 准备 一 些 结构 , Н 。 有 分 片 参数 以 及 
么 并 始 次 新 ids = ids or shards * [None] 于 存储 之 后 获取 到 所 有 搜索 参数 。 
的 搜索 。 for shard in xrange (shards) : 的 数据 。 
获取 或 者 创建 > conn = get redis соппесііоп ('%5:%5'% (component, shard), wait) 
РИ с, d, i = search_get_zset_values(conn, query, іаз|8Ннага!, 
зо ttl, update, vote, start, пит, desc) 
нн count += с 对 每 个 分 片 在 分 片上 面 进行 
data ..extend (d) 的 搜索 结果 搜索 ， 并 取得 搜 
ids[shard] з і 进行 合并 。 索 结果 的 分 值 ， 
对 所 有 搜 def key(result): < 
А z б ДЫ. ġġ 
езы. ЮКОН: 定义 一 个 简单 的 排序 辅助 函数 ， 
行 排序 。 > | data.sort(kev-kev, геуегбед-девс) 让 它 只 返回 与 分 值 有 关 的 信息 。 
results = [] 
for docid, score іп data [start:start+num] : | 从 结果 里 面 提取 出 文档 ID + 
results .append (досіа) 丢弃 与 之 关联 的 分 值 。 
return count, results, ids < 将 搜索 结果 返回 
给 调用 者 。 


search shards 25еї ( ) ОПООДОО0ДО0О000000000000000 
ОДООО0000000000000000000000000000000000000000000000 
ООО0О000000000000000000000000000000000000000000000 
ОДОО0000000000000000- ——ULucene[iSolr[]JElastic беагеһ (ПП 
ILLLLLCloud беагев ОПООООДО0000000 


ООО000000000000000000000000000000000000008000000 
0000000----ОДОООО00000000000000000000000000000000000 
0000 


10.3.3 000000000 


О90О0000000000000000000000000000000000 Twitter IUD 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДООООД0000000000000000000000000000000----О0000000000 
ОДООО0000000000 


ОДООО0О000000000000000000000000000000000000000000 
О000000000000000000000000000000000000000Аеаіѕ= 000000 
ОДООООО00000000000000000000000000000000000000000000 
ОДОО000000000000 


ОДООО0000000000  ОООО00000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000000 
Кеа ППОООООД0О000000000000000000010.3.2000000000000 
ОДООООО000000000000000000000000000000000000000000000 
Дробррр00кеаї р роророрордорорборовеаїб Доророборо0000000 
UUUUUU0000000000UUUUUUPostgre2QLUMySQLURiakUMongoDB 
UU0000000000000000000000000RedisU0000000000 


ОО8000000000000000000ЗО00000000000000000000000000 
ПО0000000000000000000000000100000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДО00000 


1000000000 


ОДО0000"0О000000"0000000000000000000000000000000 
001000000000000025е+ -тах - 21р1.15 1 - 5: 2 е0000000000000 
ОДООООО000000000000000000000000000000000000000000000 
00000 


ОДООООО000000000000000000000000000000000000000000 
ОДОД0О00000000000000000000000000000000000 и сего 000 
00000000001000000000000000150 Оо09б0000000000000000 
1500000000000000000 


ОДО0000000000000000000000000000000000020 0000000 
ОО0000000000000----0000000099.99992 0 иегорооооооооо 
ОДООООО0О0000000000000000000000000000000000000000000 
ОДОО000000000000 


ООДОО000000000000000000000000000000/А000/БЕМІ) 
2КАМСЕПООО00000000000000003000000000000000000000000 
О0009000000000000000000000Руєћопо0000000000000000000 


О00000000008000+#о ом иѕег ( ) П000000000000000АРІр 
ОДООООО000000000000000000000000000000000000000000000 


О0000000000000000000000000000000Аеаіѕ$р0000000000000 
0010-10П000000000АРІПОО000000000000000000000000000 


0000 10-10 ПОО000000АРІПО000000 


sharded_ timelines = KeyShardedConnection ('timelines', 8) < 
j ЗР < = ЖЯ- - « 
def follow_user(conn, uid, облех ціа): 创建 一 个 连接 ， 这 个 连接 拥有 在 
Екеуі = 'following:%s'%uid 指定 分 片 数 量 的 情况 下 ， 对 一 个 


组 件 进行 分 片 所 需 的 全 部 信息 。 
fkey2 = 'followers:%s'%other_uid 


if conn.zscore(fkevi, other ціа): 
print "already followed", ціа, other uid 
return Nons 


now = time.time() 


pipeline = conn.pipeline (True) 

pipeline.zaddifkevi, other uid, now) 

pipeline.zaddifkev2, uid, now) 

pipeline. zcard (fkevi) 

pipeline. zcard (Екеу2) 

following, followers = pipeline.execute () [-2:] 
pipeline.hset ('user:%s'%uid, 'following', following) 
pipeline.hset ('user:$ġs'ġother uid, 'followers', followers) 

从 正在 关注 的 用 户 的 pipeline ..execute() 

个 人 时 间 线 里 面 ， 取 





i TER pkey = 'profile:%s'%other uid 
出 最 新 的 状态 消息 。 status and score = sharded timelines [pkey] . 2геугапае ( 
| pkev, 0, HOME TIMELINE SIZE-1, withscores-True) 


根据 被 分 片 的 键 获取 一 个 | - 
连接 ， 然 后 通过 连接 获取 if status and score: 


hkey = 'home:%s'%uid 





一 个 š š 
| 流水 线 对 象 。 > pipe sharded timelines [hkey] .pipeline (True) 
pipe.zadd(hkey, **dict (status апа всоге)) 
执行 事务 。 pipe. zremrangebvrank (hkev, 0, -HOME TIMELINE SIZE-1) 
pipe. execute() 将 一 系列 状态 消息 添加 到 分 片 的 主页 时 间 
зон puwa жатта AI 
有 序 集合 进行 修剪。 


UUUUUUARPIUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UU00000000010-1100000000UUPythonDD 


ПППП10-11 000000000000000 


class KevShardedConnection(object): 


当 用 户 尝试 从 对 象 里 面 def  init (self, component, shards): 


获取 一 个 元 素 的 时 候 , 这 то, тте лее 对 象 使 用 组 件 名 字 以 及 





个 方法 就 会 被 调用 ,而 调 self.shards = shards 分 片 数量 进行 初始 化 。 
用 这 个 方法 时 传人 的 参 —> def _getitem_ (self, key): 
数 就 是 用 户 请 求 的 元 未 。 return get sharded connection( 


self.component, key, self .shards) 


根据 传人 的 键 以 及 之 前 已 知 的 组 件 名 字 
利 分 片 数量 ， 获 取 分 片 连接 。 





UUU0U0U0000000UU00UU00UURedisUUUUUUUUUUUUUUUUOUUD 
UUUUUUUULunfollow user()Uo0refiLL timeline ( ) 0000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 


UUUUUUUUUUUUUUUUUUUDO 


ОО000000000000000000000000000080000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUU00000000UUUUUU00000000010-12UUU0000000D00 
UUUUUUUUUUUUUUUUUU 


ОДООООО000000000000000000000000 
200000000000000000000000 


ОООО00000000000000000000000000000000000000000*0 
0” ВО0000000000000000000000007і&ег099.99%П000000000 
10ОоПП000000000000000000000000000000000000000000000 
ОО0000000000000000000000000000000000000010000000000 


ОДООООО000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000000 


ОДООДО0О000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000 
ЛАРОДПОО2ВЕМОПДДСВАМСЕВУЗСОВЕДООДОООООООД 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОО0000000000000000000000000000000000000000009000 
10.20000000000 


ОДОООО000000000000000000000000000000000000000000 
ООДОО0000000000000000190000000000000000000000000000 
UUUUUU00000fotLtow_ user( ) ПО00000АРІП0000000000000000 
000000010-12000000070 lL Low_user () ОООДООД0000ОАРІО 


000010-12  0000000000000000000000000 


sharded timelines = КеубпахдедСоппессіоп('Єєітеїіпезв!, 8) 
sharded followers = KevDataShardedConnection('followers', 16) 


def follow user(conn, uid, other ціа): 创建 一 个 连接 ， 这 个 连接 拥有 在 指定 
fkeyl = 'following:$s'suid 分 片 数量 的 情况 下 ， 对 一 个 组 件 进行 
fkey2 = 'followers:%s!%other uid 分 片 所 需 的 全 部 信息 。 
sconn = sharded followers [uid, octher_uid] < i 
if sconn.zscore(fkevi, other ціа): 根据 uid 和 other. 
return None 检查 uid 代表 的 用 户 | uid 获取 连接 对 象 。 
пом = tims.time() EŻGEBXIET 
spipe - sconn.pipeline (Trus) other uid 代表 的 
spipe. хаая (Гкеу1, other цій, now) 用 户 。 | з өзе 
spipe.zadd(fkey2, ціа, now) FI 把 关注 者 和 被 关注 者 
following, followers = spipe.execute į) ЖИН A AB SN BIA FF 
nee кте 集合 里 面 。 
pipeline = conn.pipeline (True) 
pipeline .hincrbv('user:żs'żuid, 'following', int(following)) H 
pipeline .hincrbv('user:$s'tġother ціа, 'followers', int (followers) } 
pipeline ..execute() 为 执行 关注 操作 的 
pkey = 'profile:%s'Sother_uid 用 户 以 及 被 关注 的 
status and score = sharded timelines [pkey] .zrevrange ( 用 户 更 新 关注 者 信 
pkev, 0, НОМЕ TIMELINE SIZE-1, withscores=True) 息 和 正在 关注 信息 
по Fino 


if status and score: 
hkey = 'home:%s'%suid 
pipe = sharded timelines [hkey] -pipeline (True) 
pipe.zadd(hkey, **dictl(status and sccre)) 
pipe .zremrangebvrank (hkev, 0, -HOME TIMELINE SIZE-1) 
pipe.execute() 


return True 


ОДООООО000000000000000000000000000000000000000000 
ООООО0000000000000000000010000000000000001900000000 
О0010000000000000000000000010-13П000000АРІ000 


000010-13 ДОТБФОДОДОДОООО 


м, y 5 , class KeyDataShardedConnection(object): 
4 MATATAAS def _ init (self, component, shards) : я 7 
找 操作 的 其 中 一 个 参数 self .component = component 对 象 使 用 组 件 名 和 分 片 数 
量 进行 初始 化 。 
де 





被 传人 时 ， 这 个 方法 将 self.shards = shards 


被 调用 。 £  десісеп (self, ids): 
idi, id2 = map(int, ids) 4 取出 那 对 ID， 并 确保 
if 3182 є 141: ее? 
如 有 果 第 二 个 ID 小 于 第 一 个 idi, 142 = 142, idi 它们 都 是 整数 。 
ID, 那么 对 调 两 个 ID 的 位 置 ， key з ''$s:$s'$(idi, 142) 
从 而 确保 第 一 个 ID 总 是 小 于 return get_sharded_connection ( 基于 那 两 个 ID 
self ..component, key, self.shards) 构建 出 一 个 键 。 


等 于 第 二 个 ID。 
使 用 构建 出 的 键 以 及 之 前 已 知 的 组 件 
名 和 分 片 数 量 ， 获 取 分 片 连接 。 





О000000000000010-110000000000000000000001000000 
ООООО0000100О000000000000000019000000000001900000000 
ОДОДОД0000000000000000000000000000000001900000000000 
OOU 


ОДОООО000000000000000000000000000000000000000000 
ПО000000000000000000000002КАМСЕВҮЅСОКЕПООО000000000 
UUUUUUUU 0"0000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДОДООО0О000000000000000000000000000000000000000000 
ОДОД00000000000078АМСЕВУ5СОВЕПОООООООДООДООО0000000 


0000020. 3.20000000000000000000000000000000000000 
00000000000000000100001090000000000000000109000000 
О00000000000000000000000000000000000000000000000010 


ОДО00ХО0000000000000000000002000000Х00000000000000 
000000 10- 140000000000000000 2КАМБЕВУ5 СОКЕППОООО 


000010-14 – ПОООКАМСЕВУ5СОКЕЦООПОООО 


йы 函数 接受 组 件 名 称 、 分 片 数量 以 及 那些 可 以 在 分 | 
获取 指向 当前 分 片 的 片 环境 下 产生 正确 行为 的 参数 作为 参数 。 
分 片 连接 。 
def sharded zrancebvscore (component, snards, key, min, max, пит): «ро 
data = П 
for shard іп xrange (8пагав): 
P conn = get redis соппессіоп("58:55"5 (component, shard)) 
data .extend (conn. zrangebvscore ( 





kev, min, max, start-0, num-num, withscores-True)) | 从 Redis 分 片上 
def key (pair): 首先 基于 分 值 对 数据 面 取出 数据 。 
return pair[1], pair[0] 进行 排序 ， 然后 再 基于 
data. sort (Кеу-Кеу) 成 员 进行 排序 。 根据 用 户 请 求 的 
return data [:num] < 一 数量 返回 元 素 。 


О00000000010.3.200000000000000000000000000000000 
ОДОДООО0000000000000000000000 


UUUUUUUUUUUUUUUU  ООО0О00000000000000000000000000 
000010.3.2000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
002.0-140000000002ВЕУВАМСЕВУ 5СОКЕПОООООООООООО00000 


ОДДОООДО007ВАМСЕВУ5СОВЕДООДООООООДОООДОДОООДОДОДО 
ООД00000000000000000000002.0-1 5000000000000000000000 
ОД0000000 


000010-15  ДОДОДО0000 


def svndicate status(uid, post, start=0, оп listssFalse): 





root = 'followers' 
key = 'followers:$s'suid 
base = 'поте:%8' 
if on lists; 
基于 预先 分 片 root = 'list:out' 通过 ZRANGESXSCORE 调用 ， 
的 结果 对 个 人 key = 'list:out:%s'%uid 找 出 下 一 组 关注 者 。 
信息 进行 分 | base = 'list:statuses:3s' 
组 ,并 把 分 组 followers = sharcded zrangebyscors (root, 
后 的 信息 存储 sharded followers.shards, key, start, 'inf', POSTS PER PASS) 
到 预先 准备 好 [> to send = defaultċiet (list) ренні 
的 结构 里 面 。 for follower, start іп followers: 
timeline = base $ follower =< 线 的 键 。 
shard = sharċ kev('timelines', 
找到 负责 存储 这 timeline, sharded timelines.shards, 2) 
个 时 间 线 的 分 片 。 to sendlshard] .append (timeline) 4 把 时 间 线 的 
4 ч x. 
for timelines іп to send.itervalues(): 键 添加 到 位 
根据 存储 这 组 时 > pipe = sharded timelines [timelines[0]] .pipeline (False) 于 同一 个 分 
间 线 的 服务 器 , 找 Lor timeline іп timelines: 片 的 其 他 时 
= 4 9 a 3 . a 
ЛЕР | pipe.zadd(timeline, **post) те = 
出 连 向 它 的 连接 ， jipe.zremranġebvrank ( 间 线 的 后 面 。 
че Jg pa | рар черу 
然后 创 -个 流 | timeline, 9, -HOME TIMELINE SIZE-1) 把 新 发 送 的 消息 
水 线 对 象 。 pipe.execute() 添加 到 时 间 线 上 
conn = redis.Redis() 面 , 并 移 除 过 于 陈 
if len(followers) >= POSTS PER PASS: IHF Ee 
execute later(conn, 'default', 'svndicate status', 


(аја, post, start, on lists)) 


elif not on lists: 
execute later(conn, 'default', 'svndicate status', 
Гаја, post, 0, Truel) 


О000000000000$упаісаёе ѕ#аїиѕ ( ) ОД00000000 
2КАМСЕВҮ5ЅСОКЕПООООО00000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
ОДООД000000000000000 


О00000005упдіїсатєе status () ОДООО0О000000000000000 
ОДОООООО0000000000000000000000000000000000000000000 
ООД00000000000000000000000000000008.40000000 


syndicate status ()000000010-15000000 
syndicate_status ( ) 000000000000000000000000000 


ПродеРовм. сом ППеРовим.сом (00000 
ОО0000000000 


10.4 ПП 
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UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUU 


UUU0U000000000000000000000000UUUUUUUUUUUUUURedisD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUD 


UUUU000000000000000RedisULua0000000000000000D00DD 
D00000000000000Redis 2.600D000Lua000000000000000000 


© DO0000000000000000000d000000000000d000000ddoo0 
2000000000000000000000Redis000000000000000000000000 
ПП25еї-тах-21р115%-512еППППППППП2 00000000000000000 
UUUUUUU 
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UUUUUU 


О000С00000000000 
UULua00UUUUUU 
e [IWATCH/MULTI/EXECII| 


e Ддузаарр00000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUU00000000000000000000000000UUUUUURedisU2.6UUUUDUU 
UULua000000000000000000000000UUUUUURedisUDUDODOUOUDUUD 
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UUUUUUUUUUUUUUUUUUU0040U0Ue000UU0U0UU0ULuab0UD 
МАТСН/МОГТІХЕХЕСООООООООООООО060000000000000000ша 
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UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
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О000000000000 


11.1 UUUUCOUUUUUUUUUUU 


DRedis 2.66000000000000Аеаіѕ$=000000000000000000000 
О00000001000000000000Аеаіѕ$9СПОО000000000000000Кеаіѕр 
ОДООООО000000000000000000000000000000000000000000000 
ILLRedis 0000000000000 


UU000000RedisUUUUUUULua0000000000Lua0URedisU000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUUDU 


П000000000000чарооооо000 
11.1.1 (Іша( |1 Кей1і5 


UU00000000000000Python RedisUUUUUURedis 2.60000000 
UUULua00000000000000000UUUUUUUUUUUUUUUUUURedisUUUUDU 
ППП5СА1РТ LOADUUUUUUU00U00UUUUUUUULua0UU00000000UUUUUU 
ООО00000000000005 НА1ОООО000000000К2МАТ5НАДОДООООООО 
ЅНАІПО0000000000000000000000000 


UU0000000000000PythonURedisUUUUUUUUUUUUUUUUUUUDUD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
script toad()00000U0LuaUUUUUUU00000UUUUUUUUUU000000D00 


ороборрр0веаї р ророророробО5сгірі _Тоаа ( ) 00000000000 
QOD0000000Redis000000000000000000000SCRIPT LOADIIIIII 
ОО000ЕМАСЅНАО00000011-10005сг1ірї Тоай( ) 00000 


000011-1 родрддвеаіврр0000000 


将 SCRIPT LOAD 命令 返回 的 已 载 人 肚 本 的 在 调用 已 载 人 脚本 的 时 候 ， 用 

ЗНА! 校 验 和 存储 到 一 个 列表 里 面 ， 以 便 PREK Redis 连接 、 脚 本 要 处 

ЈАЧЕ call () 两 数 内 部 对 其 进行 修改 。 理 的 键 以 及 脚本 的 其 他 参数 伟 
зар = def script_load(script): o > HH 
程序 只 会 在 аһа. = lione] a JIBŻA, 
SHA1 Ж def call (conn, keys=[], args-ll, force eval-False): а 
和 未 被 缓存 if not force eval: 
的 情况 下 党 {> if not sha[0]: 
试 载 人 脚本 。 sha [0] = conn.execute command ( 

"SCRIPT", "LOAD", script, parses'LOAD') 
ту: 


合用 已 缓存 的 5НА1 return conn.execute соптапа ( 
校 验 和 执行 命令 。 | "EVALSHA", shalol), len(keys), *(keys+args)) 
except redis ..exceptions .ResponseError as msg: 
if not msg.args [01] .startswith ("NOSCRIPT"): 
如 果 错 误 与 脚本 缺失 无 гаїзе 
K, 那么 重新 抛 出 异常 。 return conn.execute command ( 
"EVAL", script, len(kevs), *(keys+arqs)) 
当 程 序 接收 到 脚本 错误 时 , 或 者 程序 需要 强制 执行 
脚本 时 , 它 会 使 用 EVAL 命令 直接 执行 给 定 的 脚本 。 
1 和 一 .个 À ? a жез ыш ; 
АТ | ЛАЛА АЛАСТАЙДЫ ы 
Si ж 起 来 , 而 缓存 产生 的 8НА1 校 验 和 跟 使 用 EVALSEA 
ee 命令 缓存 脚本 产生 的 SHA1 校 验 和 龙 完 全 相同 的 。 


return call 


ПООО5СВІРТ СОАРЦПОЦЕМА 5 НАЦЦООО5 сглрЕ_ Тоад()00000 
ОО00000000000000005НА10П0000000000000005НА100000000 
ПО0000000000000000000000005САІРТ РСО5НОДОООООДОДОДО 
О000000000000000000Аеаіѕ$=000000000000000000000000000 
ООДОО0ООПЕМАЄОООООДОООПЕМАЄДООДОООДОООООДОДОООО00000000 


Веаіѕ$00000000000=сгірї Тоаа()Д00000000богсе ема1000 
ОО000000000000000000000000000000000000000 


UUULua0UUUUUUU О000000000000000000000000000иап00 
О0000300000000000006еаіѕ$ПОО000000000000000000000000 
UUUUUUUUUUUUUUUUUU 


UU00000000000000keysU00000000000UUUUUUUUUUUUUDUD 
key 5 ОООО000000000000200000000000000000000000000000 
ОДОООО000000000000000 


О000000000000000000Аеаіѕ$=000000000000000000000000 
ОО000000000000000000000000000000000Аеаіѕ= 000000 


ООД000000000000000000000000000000:. ча ророропоосо 


ОДООДОО00000000000000000000000000 


的 结果 转换 成 返回 的 函数 引用 存储 起 来 。 连接 对 象 以 及 脚本 需要 的 其 他 
相应 的 Python >> ret 1 = script loadf'return 1") 4 参数 来 调 肌 函数 。 


É гер 1(сопп q 
类 型 


只 要 条 件 允 许 ， š ' 
ЗИДОВА l 在 大 多 数 情况 下 ,我 们 都 会 把 脚本 载 入 程序 《在 此 之 后 , 我 们 就 可 以 通过 传人 
IL 


ОДДО00000000000200000000000000000000000000000000 
ОО00000000000000010 


ОСимапоооооооооовооо 


орі мароородоророї марроророоороопооорорробороо0 
ОО00000000000000012-1100000000 


ОДООО0000000000000000000000000000000000000000000 
UUU0000000000000000000000000000000LuaUbUUtable00000000 
UUUPythonDOb 


011-1 Lua0UUUUUUUUUUUUU00000 


| 











1.50000000 ОДО00000000000 
1езебрр0000000000 ОДОООРУЄПОПОДООДОГО 


1000000+223-1000 000000 








ОДД0б00000000000000000000000000000080000000000 


11.1.2 (00000000 


ООО00000000:-чароброропороропоросоропоророропосоО 
ОДДО000000000000000:. ча боррроопоооропоробороподо 


сшаббобовеаїв ПО00"МУЄТІ" /" ЕХЕС"00000000000 ПП 
Кеа уДдООДОДОД00000000Веаї  ДОООООДОООО0ЛЛО00000 
МО ТІ /ЕХЕСУПОДОДОООДОВООООДОО00000000000000000вВеаїз0 
ПЕМАГПЕМАСЅНАПВООО000000000000000000000000000000000 
ОДООООО0000000000000000000 


UUUUUUUUUUULua00000000  ООПЕМАРТООЕМАТ 5НАДДІ ча 000 
UUU0000000000000000000000000000000UUUUUUUUUUUURedis 
О00000000000000000000000000000000000Аеаіѕ= 00000 


ОДОД0000000000000000000000000001 ма - time - 1іті+00 
О0000000005САІРТ КІСЕПО0000000000 ца - time - Піті є000 
О0000Аеаіѕ$800000000 


ООО0000000008еаїзророродОООДООО000000веаї 000000 
ОО00000000000000000000000000гесоуегу0000005НнОТтром\ 


МОЗАМЕДОДОВеаїОДОДОДОВеаї  ООДОДОДОООД000000000000 
АОРУДОООДОО0000000 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


о800000008-20000000000000сгеа+е _ status()D0000000 
11-20000000000 


00001 1-2 П0000008-2000000000000000 


def create status(conn, uid, message, **data): 根据 用 户 ID 获取 用 户 的 


pipeline = conn.pipeline (True) 用 户 名 。 
pipeline.hget ('user:$s' $ ціа, 'login') 
pipeline.incr('status:id:') 4 为 这 条 状态 消息 创 
login, ід = pipeline.execute() 建 一 个 新 的 ID。 . 
if not login: 在 发 布 状态 消息 之 前 ， 先 验 

return None 证 用 户 的 账号 是 可 存在。 


data.update (í 
'message': message, 


更 新 用 户 的 已 'posted': time.time(), 





NAT у ay A Ми у 
发 送 状态 消息 id’: id; 准备 并 设置 状 
1 i f. 4 z 
数量 。 态 消息 的 各 项 
'login': login, 
р 信息 。 
pipeline.hmset('status:%s' $ id, data) 
> pipeline.hincrby('user:%s' $ uid, 'posts') 
y МЕ 
pipeline.execute() 返回 新 创建 的 状态 
return id ЇЗ АН ID, 


ОДОООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООООД000000000000000000000000000000000000000000000 
D0000000000000000000000WebOQ00000000000000000000000 


0000001 1-200000000000000000000000000000000000000 
О000000000000000000000000000000000006еаіѕ 00000000 
ОО00000000000000000000000000чарооо000000000000011-3 
UUUUUULua0UUUUUUUUUUUUUUUUUUUUUULuaUUUUUUUUUUUUUUUUD 
АРІПРУРПОПОДООО 


О000000000000000Руєһопооб000000000000000000000000 
О000000000000Аеаіѕ=П0000000000000000000Аеаіѕ 00000000 
О00000000000000000000000Кеаіѕ$0000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДО00000000000000000000000000000000МАТСН/МИ Т1 /ЕХЕС 
00000 


000011-3 ддбмарорр0000000 


根据 用 户 ID, 获取 
用 户 的 用 户 名 。 记 
FE, Lua 表格 的 索 
引 是 从 1 开始 的 ， 
而 不 是 像 Python 和 
很 多 其 他 语言 那样 
从 0 开始 。 





获取 一 个 新 的 。 ” 
状态 消息 De 


准备 好 负责 存储 
状态 消息 的 键 。 


— pz 


这 个 函数 接受 的 参数 





def create status(conn, uid, message, **data):< 
args = | 和 原版 消息 发 布 函数 
'message', message, 接受 的 参数 一 样 。 
'posted', time.time () , 
гід", uid, 准备 好 对 状态 消息 进 
] 行 设 壮 所 需 的 各 个 参 
for key, value in data.iteritems(): 数 和 属性 
args .append (key) Е | 
args .append (value) 
return create status lual $ қ 
сопп, ['user:%s' © цій, 'status:id:'l, args) АИНУ 
create status lua = Script load(''' 
local login = redis.call('hget', КЕҮЅ [1], 'login') 
if not login then 
return false ПРИЙ ЖЕ 
епа ж, 那么 回调 用 者 
local id = гейіѕ.са11('іпсг', КЕҮЅ[2]) 说 明 这 一 情况 。 
local key = string.format ('status:%s', id) 
ano esas T 为 状态 消息 МИРЕ 
Ti gin, Жез К у 
"заг за 执行 数据 设 发 布 消息 计 
unpack (ARGV) ) 置 操 作 。 Жоли DUT H 
redis.call('hinerbv', KEYS [1], 'posts', 1) а 增 操作 。 
return id R 返回 状态 消 
息 的 ID。 


UUUUUUUUUU "KEYS 000000000 11.1.100000000000000 
ОБОДО0000000000000000Кеу 500000000002 1-3000000000 
keysUUUUUUUUUUUUUUUUUUUUUUUUUURedisUUUUUUUUUUUUUUDUD 
О00000000000000000000000000000021-ЗП00000000000000 
0“ ПО00000000000000000кеуѕП000” О000000000000000000 


Кеа 5 ЛО 


00000000000 000011-З00000000000000000000Руһопр 
О00000000АРІ0000000чаро5000000000005$сгір_ 1оаа () 0000 
(иӘП ПППІмаӘП ПШПАРІППИППИПКЕУЭП ПАКОМДИППИППИППИГГП 
О00000АРІО0000000000000000000221-30000000иаб0000 


ППКеа!5 2.6000000000000000000Веаїз ді марорд0 0000000 
О0000000000Руєһпоп00геаіѕ-ру000000000000000000000000 
О000000000000000000000000РупопП000Руёһоп Package 
ІпаехП0000000геаіѕ-руро000000000000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUU 


UUU0URedisUUUUUUUUUUUUUUUU000000000000 
WATLH/VMULTI/ZEXECUUUUUUUUUUUUUUUU0UUUUUUULuaUUUUUUUU 
UUUUUUUUUUUUUUU 
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00006. 200000000000000боароооооооооовоооооооооооо 
006 ЗДООД0О00000000000000000000000000000000 


ПО00000000.чапооооооо0000000000000 
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00000000011.1.10011.1.200000000000000000000EVALOO 
UUEVALSHAUUUUULua0000000000USHA1IO0000000000000Luabb 
О0000000000000000000000Аеаіѕ$=00000000000000000000000 
ОООД00000000000000000000000000000000000000000 
WATCH/MULTI/ / ЕХЕСОООООДОДООООООДОО0ОДОДОО0ОКЕУ5О00000 
О00000000000000000Аеаіѕ=000000000000000 


О000000000Аеаіѕ=000000000000000000000000000000000 
О00000000000000Аеаіѕ$=000000000000000000000000000000 


О000000000006еаіѕП002.400000000000000000000000000000 
О00000000000000Аеаіѕ$=0000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
000000 


UUUUUUUUUUUUUUULua0UUUUUUD0 


11.2.2 ПИ 


6.20П0000000000000019000005ЕТ7МХОООООО000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ООО0000000000000012 1-4000000000000 


000011-4 0006.2.5000000000 


acquire lock with timeout()() 


def acquire lock with timeout ( 


conn, lockname, acquire timeout-10, lock timeout-10): | 128 位 随机 标识 符 。 
identifier = str(uuid.uuid4()) < 
lockname = 'lock:' + lockname 
lock timeout = int (math.ceil(lock timeout)) « 确保 传 给 EXPIRE 
end = time.time() + acquire timeout 的 都 是 整数 。 
while time.time() < end: 

if conn.setnx(lockname, identifier): 获取 锁 并 设置 

conn.expire (lockname, lock timeout) 过 期 时 间 。 


return identifier 
elif not сопп.Е1 (1оскпате) : 
сопп.ехріге (lockname, lock timeout) 


检查 过 期 时 间 ， 并 在 有 需要 
时 对 其 进行 更 新 。 





time.sleep(.001) 


return False 


0000006.200000000000000000000000000000000000021- 
З ОДОДО00000000000000:. ча ророообпоборбоороо000 


000011-5 бОбмаббПасдціге lock with timeout()(II 


def acquire lock with timeout( 
conn, lockname, acquire timeout-10, lock timeout-10): 
identifier = str(uuid.uuid4()) 
lockname = 'lock:' + lockname 
lock_timeout = int (math.ceil (lock_ timeout) ) 


执行 实际 的 锁 获 取 操 作 , 通过 


acquired = False 


end = time.time() + acquire_timeout 检查 确保 Lua 调用 已 经 执行 
while time.time() < end and not acquired: 成 功 。 
acquired = acquire lock with timeout lua( 
conn, [lockname], (lock timeout, identifier)) == "ОК! - 


time.sleep(.001 % (not асацігеа)) 
return acquired апа identifier 检测 锁 是 省 已 经 存在 。 
(再 次 提醒 ，Lua 表格 的 
索引 是 从 1 开始 的 。) 


acquire lock with timeout lua = script load(''' 


if redis.call('exists', KEYS[1]) == 0 then 
return redis.call('setex', КЕҮЅ [1], unpack (ARGV) ) < 
35 Шы 
识 符 去 设置 键 。 


ООО0005ЕТМХОДОЕХРІКЕООДОО5ЕТЕХОДООООООООДОДО0000 
ОДО0000і чарооорОО0000000000000000000000000000000000 
ПП чарррро000000 


ОДОДОДД00000000000000000мМАТСНООбОДО00000000000000 
ООООДОДООД000000000000000000000000000000000000000 
11-6П00иџаП00ге1еаѕе ТоскК()ППД 


000011-6 ILuajlirelease 1осК()ГП 


def release lock(conn, lockname, identifier): 调用 名 М 
- I 
lockname = 'lock:' + lockname 调用 负责 释放 锁 
return release lock lua(conn, [lockname], [identifier]) 的 Lua 函数。 


release_lock_lua = script load(''' 检查 锁 是 否 匹 配 。 
if redis.call('get', KEYS[1]) == ARGV[1] then 4— 
return redis.call('del', КЕУЗ[1]) or true 


тт ночная | 
总 是 返回 真 值 。 


UUUUUUUULua0U0UUUUUUUUUUUUUUUUUUUUUUUUUUD 
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ООДОО0000000000000000їчароробоооропороропооосодо 
ОДД000000000000000ї чароропобороборо0000000000000000 
О00000000000010020050010000000000000000000000000000 
ОО0000000000000001900000000000000000000000011-20000 
000000 


011-2 П000000чабо000002100000000 














0000 10000000000000 100000000000 








000002 1-200000000000000000О О Счароооовооооооооооо 
0Ооооооовоооооовоовооооо0обоапооооо4 ољрооооооооооо 
Дррєчаро0000879:00000500010000000000-ча 00000200000 
ОДОДОО000000000000000001ї 0 чаррооо00000000000000000001 ча 
ОДОООО00000000000000000000 


ООр00000000-чароророопороророоорооообоооо00000000000 
ОДООО000000000000 


ОбОбОр00000000000000000000000000000їчарр0000000 
00 


11.2.3 [Lua 


О0060000000000000000000000000000000000000 
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ОДООООО000000000000000000000000000000000000000000000 
ОДОО000000000000 


000011-7000060000000000000000000000000000000000 
Lua[l IILI! 


000011-7 ПЦ06.3.1П0Дасдиіге ѕетарһоге ( ) 00 


def acquire semaphore(conn, semname, limit, timeout=10): 


identifier = str(uuid.uuid4()) Mi 128 {у 


now = time.timel) 


清理 过 期 的 信 机 标识 符 。 
号 量 持 有 者 。 pipeline = conn.pipeline (True) 
pipeline.zremrangebyscore (semname, '-inf', now - timeout) 
Қ ا‎ pipeline.zadd (semname, identifier, now) <— омање 
Ky EL Aš PET < 试 获 取 
检查 是 否 成 功 取 pipeline.zrank (semname, identifier) 信号 量 
ТУ JR ОН о if pipeline.execute() l-11 < limit: йы 
return identifier 
conn.zrem(semname, identifier) <¬ 获取 信号 量 失 败 ， 删 除 
return None 之 前 添加 的 标识 符 , 


ОО000000000000000000000000000000000иар0000000000 
О00000000000000000000000000000Аеаіѕ=В00000006чаб0000 
ООО00000000000000000000000000000000000000000.оар000 
ООО00000000000000011-8000ї мабОПасаціге ѕетарћоге() 
00 


Д000Оасачіге semaphore ( ) 00000006-14000 
acquire semaphore with lock( ) ПОО0000000000000000000 
UUUUUUUUULua0U0UUUUUUUUUUUUUUUUUUUUUUZINTERS2TOREDDU 
和 RANCEBYRANKUUUUUUUUUUUUUUUUUUUUUUUD 


000011-8 ([[ijLua[lil)acquire_semaphore()[I] 


取得 当前 时 间 戳 , 用 于 

处 理 超时 信号 地。 把 所 有 必须 的 参数 

def acquire зетарћоке(сопп, semname, limit, timeout=10) 传递 给 ер" 函数 у 
now = time.time() 实际 地 执行 信号 量 


return acquire зетарпоге lua(conn, [semname], 获取 操作 。 
[now-timeout, limit, now, str (uuid.uuid4 ( 


acquire_semaphore_lua = script load(''' 清除 所 有 已 过 期 的 

redis.call('zremrangebyscore', KEYS [1], '-inf', ARGV[1]) <— 信号 量 。 

if redis.call('zcard', KEXSI1)) < tonumber {ARGV [2] ) then Р ی‎ 
redis.call('zadd', KEYS [1], ARGV [3], ARGV [4] ) <— پو ات‎ 

` > ۴ fi z HLH , A 

return АЕОУ [4] 把 时 间 蕉 添加 到 超 ни 

end ж = 3 

«ж 时 有 序 集合 里 面 。 


UUULuaUUUU000000000UUUUUUUUU0000006.3.1000 
release semaphore( ()DU000000000000UUULuaUUUUUUUUUUUD 
0000000006. 3. 300000000000000000 + 1-90оооосиапоооооооо 
0000 


000011-9 (О шацЦОгеТге5зћ_5зетарћоге ( ) 00 


def refresh semaphore (conn, semname, identifier): 如 采信 和 号 量 仍然 存 | 
如 果 信 号 量 没 有 被 刷 return refresh semaphore lua(conn, [зетпатеј, 在 那么 对 它 的 时 | 
新 ,那么 Lua 脚本 将 > [identifier, time.time()]) != None здоро 
ІН ТЫН. 


返回 空 值 ， 而 Python refresh_semaphore_lua = script_load(''' 
会 将 这 个 空 值 转换 if redis.call('zscore', KEYS [1], ARGV[1]) then 
成 None 并 返回 给 调 return redis.call('zadd', KEYS[1], ARGV[2], ARGV[1]) or true 


enda 
用 者 。 нн 





Дроічаодродоорорободороророоопічаоородорр0000000 
00 


UUUUUUUUUUUUULuaUUUUUUUUUUUUUUUUD 
МАТСН/МЦ ТІ / ЕХЕСПОДООДООДООООДООООДО00000000 
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ОО0000000000 
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UUU00000000UWATCHOMULTIDUEXECOUUURedisUUUUUUUUUUD 
UUUUUU0000UUWATCHUUUUUU000000UUUUUUUUU000000UUUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDU 
UUUUUUUUUUUUUUUUUU 


UUUUUUe0UUUUUUUUUU000040UU0U0000000UUUUUUUUU0Lua000D0 
UUUUUUUUUUUUUUUD 


ООД000000000600000000000 


11.3.1 0000000000 
ОДО600000000000000000000000000000000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ПО000000000МАТСНОООООООО000000000000000000000000000 
О00000000000000000010000000000М0ЕТІ0ООЕХЕСПОО00000 
О0000000000000000002121-10П0000000000000000 


000011-10 006.1.200000000 


start, епа = find prefix range (prefix) 


def autocomplete on prefix(conn, guild, prefix): 





ЕЕ 
identifier = str(uuid.uuid4()) e 
start += identifier 计算 出 查找 范围 
end += identifier | 的 起 点 和 终点 。 
zset_name = 'members:' + guild 
conn.zadd(zset_name, start, 0, епа, 0) š ЖЕ A BJ де WA pÚ = 
pipeline = conn.pipeline (True) 利 结束 元 素 添加 到 
while 1: 
FEARR. 
құлды 有 序 集合 里 面 。 
Pipeline.watch (zset name) 
sindex = pipeline.zrank (zset name, start) 找到 两 个 被 插 
еіпдех = pipeline.zrank (zset name, end) 人 元 素 在 有 序 
erange = min(sindex + 9, eindex - 2) 集合 中 的 排名 。 
pipeline.multi() | 
pipeline .zrem(zset name, start, end) 获取 范围 内 的 值 , 然后 
pipeline.zrange (zset name, sindex, erange) 删除 之 前 插入 的 起 始 
items = pipeline.execute() l-1) 元 素 和 结束 元 素 。 
break 
except redis ..exceptions .WatchError: 如 果 自 动 补 全 有 序 集合 已 经 被 其 他 
continue 客户 端 修改 过 了 ， 那 么 进行 重 试 。 
return [item for item іп items if Ч! not іп item] <— 如 果 有 其 他 自动 补 全 操作 
正在 执行 ， 那 么 从 获取 到 
的 元 素 里 面 移 除 起 始 元 素 
和 结束 元 素 。 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
40”%UUUU011-1IIO0UUUUUUUUUUU00000U0UUULuaUUUUUU0000DD 


000011-11 добмардрррр00000000 


取得 范围 和 
标识 符 。 


过 滤 掉 所 有 不 
想 要 的 元 素 。 
在 有 序 集合 里 面 找 
到 范围 元 素 的 位 置 。 


— 
移 除 范围 
元 素 。 


def autocomplete on prefixlconn, guild, prefix): 
start, end = find prefix range (prefix) 
identifier = str(uuid.uuid4()) 


items = autocomplete on prefix lua(conn, 3 š 
['members:' + guild], 使 用 Lua 脚本 从 Redis 
Istartridentifier, end+identifier]) 里 面 获取 数据 。 

return [item for item іп items if '{' not іп item] 把 标记 党 围 起 

ж Ee 
autocomplete on prefix lua = script loadi''' ХАТНІ ка ПУЛ 
redis.call('zadd', KEYS[1], 0, АВСУГІЇ, 0, ARGV[2]) — 素 添加 到 有 序 
local sindex = redis.call('zrank', KEYS[1], ARGV (11) 集合 里 而 。 
local eindex = redis.call('zrank', KEYS [1], ARGV[2]) 
еіпдех = math.min(sindex + 9, eindex - 2) а НР IJ то Ж 
redis.call('zrem', KEYS[1], unpack(ARGV)) 所 处 的 范围 。 
return redis.call('zrange', KEYS [1], sindex, eindex) < 

| 获取 并 返回 





UULuaUUUU0000000060000000000UUUUUU00000UUUUUUUU 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
ОДО600000000000000001002005001000000000000000000000 
ОООО00О00000000000000000000021-300000000000000000000 
О000000010000000000000000000000000000 


011-3 ПО00000000чароо00000010000000000 





100000000000000 100000000000000 








О0000000010000 


00000000020000 


00000000050000 














0000 100000000000000 100000000000000 




















О0000000000000МАТСН/МОГТІ/ЕХЕСО00000000000000000 
ОДД000000000000000000000000000000002000000000000000 
UUUULuaUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUULuaUUUUUUU 
О00000000000000000000000000МАТСНОО0000000000000000 
100000000000чабоо000000000000002000 


UUUUUUUULua00UUUUUUUUUUUUUUUUUUUUUUUUUUULuaUUUUUD0 
UUUUUU 


11.3.2 [0000000000000 


6.2000004.400000000000000000000000000000000 
МАТСА/МО ТІ / ЕХЕСОПОДООООООООДОООООДОО00000000000 


ОО0000000000000000000000000000иабоооо00000000000 
OOU 


000011-120000006.2000000000000000000000000000000 
ОДООООО00000000000000000000000000000000000000000 


00001212 006.2000000000000 


def purchase item with lock(conn, buverid, itemid, sellerid): 
buyer = 'users:żs' $ buverid 


seller = 'users:$s' $ sellerid 

item = "58.58" $ (itemid, sellerid) 

inventory = "іпуепіогу:%8" $ buverid 

locked = acquire lock(conn, 'market:') <— 尝试 获取 锁 。 


if not locked: 
return False 


pipe = conn.pipeline (True) 





trv: 
pipe.zscore ('market:', item) 
pipe.hget(buver, 'funds') М 检查 商品 是 否 已 经 售 出 ， 
price, funds = pipe.execute 5 = 
if price is None ок price > funds: 以 及 买 家 是 否 有 足够 的 

return None 钱 来 购买 商品 。 

pipe.hincrby (seller, 'funds', int(price)) 
pipe.hincrby (buyer, 'funds', int(-price)) 将 买 家 支付 的 钱 转 移 
pipe. sadd (inventorv, itemid) 给 卖家 ， 并 将 售 出 的 
pipe.zrem("market:", item) 商品 转移 给 买 家 。 
pipe.execute() 
return True 

finally: 
release lock(conn, 'market:', locked) < 一 一 释放 锁 。 


ОДД0000000000000000000000000000021-1200000000000 
О000000 


рр чаодродрооороророооророооросоророборороро0000 
ОДБОДООО000000000000000000000000000000000000000000000 
000000021-13000003ча об00000000 


00001213) ПП чап 


获取 商品 的 价 
格 以 及 买 家 可 
用 的 钱 数 。 


def purchase item(conn, buverid, itemid, sellerid): 
buyer = 'users:ss' $ buverid 准备 好 执行 Lua 


seller = "users:%s" $ sellerid кемем 
item = "58.58"5 (ісетід, sellerid) 脚本 所 需 的 全 译 
inventory = "inventory:%s" $ buyerid 键 和 参数 。 


return purchase item Іца(сопп, 
l'market:', buyer, seller, inventory], litem, itemid)) 


purchase item lua = script load(''' 
local price = tonumber(redis.call('zscore', KEXSI1), АВСУ(11)) 


local funds = tonumber ((redis.call('hget', КЕҮ5І2І, 'funds')) 

if price and funds and funds >= price then 如 果 商 品 仍 在 销售 ， 
redis.call('hincrby', KEYS[3], 'funds', price) 并 且 买 家 也 有 足够 
redis.call('hincrby', KEYS[2], 'funds', -price) 的 钱 JIKŻ 对 商品 
redis.call('sadd', KEYS[4], ARGV[2]) рю Aa: кае H 
redis.call('zrem', KEYS[1], ARGV[11) 钱 进行 相应 的 转移 。 
return true < нын 

а | 返回 真 值 表示 购 类 

н) 操作 执行 成 功 。 


UUUUUUUUUUUUUUUUUULuaUUUUUUUUUUUUUUUUUUUUUUUULua 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
О00000000000000000000000000060000000000000000000000 
UUUUUUUUUUUUUUUUUUUUUUUUUUU 


UUUUULuaUUUUUUUU 


UUUUUU000000ULua0UUUUUUU00000000ULuaUUU4.4.2DU 
UU00000Uitem-listingUUUUUUUUUUUUUUUUUUUUUUUUUUUD0DD 


ОДООООО0000000000000000000000000000000000 


ООр00000000:-чабодророоороррооорооподороорро00000 
Еоабо5000000000000000000МАТСН/МШ ТІ /ЕХЕСОДООДОД0000 
О0000000300000000000006.2.4000000000000000000500000 


-чаПо000000000005000000џаробооо0о0000000000000000000 
011-4000000 


011-4 ДОДДО00008чаро0000000000000000000400006000000 


Wa 000000 | 000000 | 000000 | 00000000000 




















Оррорімародроророборрічаооооробообпоборро0000000 
О00000000000иарооо000000000000000000000000004.250000 
О0000000000000021000000000000000.6100000000000000000 
П00Ечароооо00000000000000000000000МАТСН/МОЕСТІ/ЕХЕСП 


UUUULuaUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUU 
RedisUU0ULua00000000LuaUUUUUURedisUDUUUUUUUUUUD 
МАТСН/МОЕТІ/ ЕХЕСО000000000 


UUUUUULuaUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUULuaUUUUU 
UUUUU 


D000ePUBw.COMUNUUUePUBw.COM (00000 
UUUUUUUUUUDUU 


11.4 UULuaDUUUUUUU 


9.2009.ЗПО000000000000000000000000000000010.30000 
ОДОДООО0О000000000000000000000000000000000000000000 
00 


00009.20000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000 


ОДООД00000000000000000000000000000 


11.4.1 ПО00000 


ОДООООО0ОД00000000000000000000000000000000000000 
ООООО00000000000019000000000100 


ООДО0О00Д000000000000000000000001200000000 
<listname>:first[] < 15  пате> : Та5 Вес -ПООООООООООО 


ООДОО0000000001000000002 1-10000000000000000000000010 
00 


slist:first string slist:last string 


011-1 000000000000000000 2» 

















ОООО000000000000000000х11 5 пате> : <5ћа гата>000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДДОДТФОДОДО0ОО00000000000000000000000000000000000000 
ОООД0000000000001900000000002 1-22000000000000000000 
00 


slist4 一 -- list 













7857f63f-a019 当 分 片 列表 包含 多 个 列表 时 ， 位 
于 分 片 列表 两 端的 列表 可 能 是 
114#110а-# 
ранни 被 十 满 的 ， 但 位 于 两 端 之 间 的 其 
іа 他 列表 总 是 被 填 满 的 
slist:5 一 list 
图 中 的 这 个 分 片 列表 由 3 个 分 片 组 成 ， 
pi slist:4 为 第 一 个 分 片 〈 它 可 能 未 被 填 满 ) ， 


fa8c2b0c-6dbe slist:5 为 第 二 个 分 片 〈 它 已 经 被 填 满 ) , 
562a5690-493b slist:6 为 最 后 一 个 分 片 〈 它 同样 可 能 未 被 填 满 ) 


slist:6 ————— list 





782e0954-139c 这 一 设计 使 得 程序 可 以 快速 地 计算 出 分 
967e695a-94dd 片 列表 的 总 长 度 


d986dcc4-edec 


011-2  000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОТОрОДООДО0О00000000000000000000000000 


11.4.2 [JII] 


ОДООД0000000000000000000000000000000000000000 
Redis 2.6 ПДОО0О000000000000000000000000000000000000 
ОДОООО000000000000000000000000000 


О000000000000000000000000сһипкО00000000000000000 
О00000000000000000000000000000000000000000000000°00 
ОДООООО00000000000000000000000000 


Обрбррбр0о000000000000ї чар чаподоропороооо0б000 
ОДООООД000000000000000000000000000000000000000000000 
00000000012-140000000000000000000РУСпопОДЬЕмаб 00 


000011-14 | 00000000000000 


素 推 人 分 片 列表 
里 面 о 


计算 被 推 人 
的 元 素数 量 。| 
调用 sharded. 
push helper () 
限 数 ,并 通过 指定 的 
参数 告诉 它 应 该 执 
行 左 端 推 人 操作 还 
是 右 端 推 人 操作 。 





和 弄 清楚 程序 要 对 | 
列表 的 左 端 还 是 | 


右 端 进行 推 人 , Ж 
后 取得 那 一 端 对 
应 的 分 片 。 

取得 分 片 的 当 

前 长 度 。 
计算 出 在 不 超过 限 
制 的 情况 下 ， 可 以 
将 多 少 个 元 素 推 人 
目前 的 列表 里 面 。 
此 外 ， 在 列表 里 面 
保留 一 个 节点 的 空 
间 以 便 处 理 之 后 可 
能 发 生 的 阻塞 弹出 
操作 。 








转换 成 列表 推 人 时 ……… | Дд 
деї = h helper ( k f, ЖЕЙ ) моланы дын 
ef sharded push_helper(conn, key, *items, **kwargs): зве DI ја: 
items = list(items) 读者 可 以 根据 自己 的 
total = 0 压缩 列表 最 大 长 度 来 
while items: 调整 这 个 数值 。 
pushad = sharded push lua(conn, 
[key+':', Кеу+':Ејк5Е', key+':last'], 移 除 那 些 已 经 被 
[kwargs [' ста']] + items[:64]) &Е— | 
total += pushed 推 人 分 片 列表 里 
del items[:pushed] «оз 面 的 元 素 。 
return total < 返回 被 推 人 元 素 的 
def sharded lpush(conn, key, *items): 总 数量 。 
return sharded_push_helper(conn, key, *items, cmd='lpush') 
—) def sharded_rpush (conn, key, *items): 
return sharded_push_helper(conn, key, *items, cmd='rpush') 
sharded push lua = script load(''' ir A 
- ХЕК г 1 Ж 
local тах = tonumber(redis.call( 确定 每 | 列表 分 片 的 
'config', 'get', 'list-max-ziplist-entries')[2]) 最 大 长 度 。 
if #ARGV < 2 ог пах < 2 then return 0 end « 如 果 没 有 元 素 需 要 
local skey = ARGV[1] == 'lpush' and KEYS[2] or KEYS[3] | 进行 推 人 , 又 或 者 压 
local shard = redis.call('get', skey) or 'o' 缩 列 表 的 最 大 长 度 
while 1 do 太 小 ， 那 么 返回 0。 
> local current = tonumber (redis.call('llen', KEYS [1] ..зћака)) 
p local topush = math.min(ĦARGV - 1, тах - current - 1) 
if topush > 0 then 
redis.call(ARGV[1], KEYS[1]..shard, unpack(ARGV, 2, topush+1)) — 
return topush | 
епа 
> shard = redis.call(ARGV[1] == 'lpush' апа 'decr' or 'incr', skey) 
end 
тра ) ġ 
在 条 件 允 许 的 情况 下 , 向 列 
否则 , 生成 一 个 新 的 分 片 并 继续 进 表 推 人 尽 可 能 多 的 元 素 。 
行 未 完成 的 推 人 工作 。 





О0000000000000000000000000000000000000000006400 
ОДООООО000000000000000000000000000000000000000000000 


0000 


00000000000 О0000000000000Аеаіѕ$=00000000000000000 
ООДО0000000000000000000000000000КЕУ5ОООО0000000000000 
ОДООООД000000000000000000000000000000000000000000000 
О00000000Аеаіѕ=ВО0ООООО000000000000000 


ОДООООО000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДОООО0000000000000000000000 


ОДОО000000000 


ОДОООДОО0000000000000000000000000000000000000 
ПО0000000000000000000000иаП000000иабоо00000000000 
UUUUUUUUUU 


ОДООО000000000000000 


11.4.3 0000000000 


ПОО0000000000000000000000006џаробо000 
WATCH/MULTI/ ЕХЕСОДООООООООООДОДОООООДОО00000000000 
ППППИПОМАТСН/МИ ТІ /ЕХЕСОДОООООООООООД00О00О00000000000 
ОДООО0000000000000 


UUUULua0UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUOUDUD 
UUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUUDUDU 
UUUUUUUUUUUUUUUU0011-12000 


000011-15 DUOUUUUUUUUUUUULuab0D 


def sharded lpop(conn, key): 
return sharded list pop lua( 





找到 需要 执 сопа, |Кеуз!':!, key+';first!, Кеуз':Іазі'Ї, |'їрор')) 

行 弹出 操作 def sharded крор(сопп, key): 

的 分 片 。 return sharded list pop lua( 
找到 不 需 conn, [Кеу+':', key+':first', key+':last'], ['rpop']) 
要 执行 弹 sharded list pop lua = script load(''' 获取 需要 执行 弹出 
出 操作 的 local skey = ARGV[1] == 'ірср' апа KEYS[2] or KEYS[3] 操作 的 分 片 的 ID。 
分 片 。 > local okey = ARGV[1] -= 'lpop' and KEYS[2] or КЕҮСЅ [3] 
从 分 片 对 应 的 local shard = redis.call('get', skev) or '0' < 


FIR Hi ра E > local ret = redis.call (ARGVI[1], KEXSI1)..shard) 

一 个 元 素 。 if not ret or redis.call('llen', KEYS[1] ..shard) == '0' then < 
W г> local oshard redis.call('get', okey) ог '0' 

获取 不 需要 执 š 


行 弹 出 操作 的 if shard == озпага then 如 果 程 序 因 为 分 片 为 空 而 没有 得 到 弹出 元 素 ， 
分 片 的 ID。 return ret 叉 或 者 弹出 操作 使 得 分 片 变 空 了 ， 那 么 对 分 片 
如 果 分 片 列表 的 两 | 454 итик, 
端 相同 , 那么 说 明 它 local спа = ARGV[1] == 'їрор' and 'incr' ог "десі! « 
已 经 不 包含 任何 元 根据 被 弹出 的 元 素来 白 列 表 的 左 端 还 是 右 端 ， 
Ж. 操作 执 行 完毕 。 决定 应 该 增加 还 是 减少 分 片 的 И), 
A ee жер 
( endpoint ) 。 ret = redis.call(ARGVI1), KEXSI1)..shard) я 
епа 
end 如 果 之 前 没有 取得 弹出 元 素 ， 
return ret 那么 尝试 对 新 分 片 进 行 弹出 。 


тт) 


ОДООООО0ОД000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ОДООООД0000000000000000000000000000000000000000000 


ОДОООД0000000АРІОООДОДО000 


11.4.4 [(0000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 


ОДОООО000000000000000000000000000000000000000000000 
000000 


ОрьчадромаАтсн/ ми ТІ /ЕХЕСОДООООООООООДОДОДОДОДОДО 
ОДООООД000000000000000000000000000000000000000000000 
ПППППГЧаППЦ\ИАТСН/МП ТІ / ЕХЕСО00000000000000000000000 
ОДООООО00000000000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДООООО000000000000000000000000000000000000000000000 
ОДООО0О0000000000000000000000 


ОДООО0О000000000000000000000000000000000000000000 
ОДОООО00О000000000001900000000100000000000000190000000 
00 


ОДООДО0000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
ПО00ЕМУАСПООООО0000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
О00000000000000*000"Оачтту item[ ОДОСОООДООО000000000 
OOU 


Lua ПП ПВ 
Орчабоо00000000000000000000000000000000000000000000 
ОДОООО000000000000000000000000000000000000000000000 
000000 


UUU MULTI / "ЕХЕС"О0000 | ОООООООООООМУ ТІ /ЕХЕСО0О 
ОДОД0О0000000000000000МАТСН/МИСТІ/ЕХЕСОДОДОДОДОДО 
ВІ РОРДОВЕРОРОДООЕХЕСООДООООДОДОДОООМОЇ ТТ / ЕХЕСОДПО 
ВЕРОРППООВКРОРООООО00000000000000000000000000000000 
ОО00000000000000000000000000М0ЕТІ/ЕХЕСПО0ВЕРОРр 
ВЕРОРООООООООДООІРОРОВРОРОДООООООООООООДООО0000000 


ОДООО0000000000000000000000000000000000000000000 
ОЗ 00ОД00000000000000000000000000000000000000000000 
ОДО0000000000000000000000000000000000001.1-160000000 
ОДО00000 


000011-16 ПОО0000000000000 


预先 定义 好 的 伪 元 素 ， 读 者 也 可 以 按 自己 的 
需要 ， 把 这 个 伪 元 素 替 换 成 某 个 不 可 能 出 现 














定义 一 个 辅助 函数 , 这 个 函数 会 为 
在 分 片 列表 里 面 的 值 。 左 端 阻塞 弹出 操作 以 及 右 端 阻塞 
DUMMY = str(uuid.uuid4()) «ноз 弹出 操作 执行 实际 的 弹出 动作 。 
def sharded Брор helper (conn, key, timeout, pop, bpop, endp, push): 
, Р pipe = сопп.ріре1іпе (False) 3 Р 
取得 程序 认为 需要 对 其 timeout = max(timeout, 0) or 2**64 准备 好 流水 线 对 象 
执行 弹出 操作 的 分 片 。 end = time.time() 4 timeout 和 超时 信息 。 
运行 Lua 脚 本 辅助 程 E pass чш, 尝试 执行 一 次 非 阻塞 弹出 ,如 
Ай result = рор(сопп, key ~ > ~ 
ЈЕ, 它 会 在 程序 尝试 if result not in (None, DUMMX): 果 这 E d ! 
从 错误 的 分 片 里 面 return result 弹出 值 ， 并 且 这 个 值 并 不 是 伪 
弹出 元 素 的 时 候 , 将 Ж, 那么 返回 这 个 值 。 
Ғе ЖАЛ shard = conn.get (key + endp) or '0' 
一 个 伪 元 素 推 B sharded bpop helper lua(pipe, [key + ':', key 4 епарі, 
个 分 片 里 面 。 г> [shard, push, DUMMY], force_eval=True) 
getattr(pipe, Брор) (key + ':' + shard, 1) > 
因为 程序 不 能 在 流水 线 使 用 用 户 传人 
里 面 执行 一 个 可 能 会 失 result = (pipe.execute() [-1] or [Мопеј) [-1] 的 BLPOP 命令 
败 的 EYALSHA 调用 ， 所 if result not іп (None, DUMMX): 或 ВВРОР f 
б 1 ө 
以 这 里 需要 使 用 force ава 4, 对 列表 执行 
eval 参数 ,确保 程序 调 如 果 命令 返回 了 一 个 元 | | 阻塞 弹出 操作 。 
用 的 是 EVAL 命令 而 不 素 ， 那 么 程序 执行 完毕 ; 
是 EVALSHA 命令 。 否则 的 话 ， 进行 重 试 。 
def sharded blpop (conn, key, timeout-0): 
г return sharded bpop helper( 
这 些 函数 负责 调 conn, key, timeout, sharded lpop, 'blpop', ':first', 'lpush') 
гае 的 阻塞 弹 def sharded brpop(conn, key, timeout-0): 
s return sharded bpop_helper( 
如 果 程序 接 下 来 conn, key, timeout, sharded rpop, 'brpop', ':last', 'rpush') 
епи sharded bpop helper lua = script 1оад(''' 找到 程序 想 要 对 
里 面 弹出 元 素 , 屠 local shard = redis.call('get', КЕУ5[2]) or '0' 其 执行 弹出 操作 
2 жері , LI if shard ~= ARGV[1] then 的 列表 端 , 并 取得 
么 将 伪 元 素 推 人 redis.call(ARGV[2], KEYS[1]..ARGV[1], ARGV[31) š 
那个 分 片 里 面 。 这 个 列表 端 对 应 
mi 的 分 片 。 


end 
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О00000000реюіапробитихо000000000000000ар -get 
install геді5- зегме гП0000 Кеа ДООДОДОДОД0000000000 
Debian[|[JUbuntu[ ДОДООООООДОДОООСОДОДОООДОДОВеаїООООДОб 
Ubuntu 10.40000apt-get install гей15-сегуег(ПІПП 
2010030000Redis 1.2.6000000000000000000000000000000 
HU 


Ороборорорордободорородроррвкеаїь ррродододоровВеаїз)) 
ПООСОО000000000000АеаіѕП00000000Аеаіѕ 00000000000 
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-5 sudo apt-get update 
~$ sudo apt-get install make асс python-dev 
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U2000000UUUUUUUURedisb 
U300000UPython0UUURedisUU0UD0 
ООООА-200000000000000 

ПППА-2 ULinuxDUUUUURedis 


从 http://redis.io/download 下 载 最 新 版 的 Redis。 
本 书写 作 时 Redis 的 最 新 版 本 为 2.6。 | 


~:5 wget -q http://redis.googlecode.com/Files/redis-2.6.9.tar.gz < 


编译 «18 tar -xzf redis-2.6.9.tar.gz س‎ | 
3 | ~:5 са redis-2.6.9/ 解压 源码 。 
Redis。 > mjredis-2.6.9:$ make 
cd src && make all NA і Е 
енені 注意 观察 编译 消息 ， 
安装 паке [1]: Leaving directory `~/redis-2.6.9/src' 这 里 不 应 该 看 到 错误 。 
Redis。 ~/redis-2.6.9:$ sudo make install 
cd src && таке install 
泪 音 观察 安装 消 自 
= | [trimmed] ПОЖЕЖНА, = 
启动 Redis L. паке [1] : Leaving directory '-/redis-2.6.9/sre' 里 不 应 该 看 到 错误 。 
服务 器 。 ~ /тед15-2.6.9:5 redis-server redis.conf 
(13792) 2 Feb 17:53:16.523 * Max number of open files set to 10032 
(trimmed) | 
[13792] 2 Feb 17:53:16.529 * The server is now ready to accept 
connections on port 6379 
通过 日 志 确 认 Redis 
已 经 顺利 启动 。 


UUU0UURedisUUUUUUUUPython0UUUURedisUUUUUUUUUUDODU 
UbuntuUDebian0UDU0UPython 2.6002. 7000000000000000 
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ѕеїиріоо1500000005ітріе helper раскадеП®ПППППА-З3ПППП 
РУТпопдддОВеаїв ДДО0000000 


ППШПА-З ([IILinux[|]PythoniíI i IRedisl|[|[ I! 


通过 运行 ez_ 
setup 模块 来 
下 载 并 安装 


setuptools, 


redis 417) Python 
提供 了 一 个 连接 
至 Redis 的 接口 。 


下 载 ez_setup 模块 。 


~:$ wget -а http://peak.telecommunity.com/dist/ez setup.py < 
~:8 sudo python ez_setup.py 

Downloading http://pvpi.pvthon.org/packages/2.7/s/setuptools/... 
[trimmed] 


` A) 运行 
Finished processing dependencies for setuptocls—-6.6c11 ЎТ 
~:5 sudo python -m easy_install redis hiredis 4 setuptools 的 
Searching for redis аат. 
[trimmed] аи 
Finished processing dependencies for redis 包 来 安装 redis 

包 以 及 hiredis 包 .。 
Searching for hiredis hiredis 包 是 一 个 C 库 ， 
[trimmed] 它 可 以 提高 Python 的 


е processing dependencies for hiredis Redis 客户 端 库 的 速度 。 
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Дророкеаї 0000 
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下 载 用 于 安装 Rudix 的 





引导 脚本 。 
命令 Rudix стер ا‎ -O http://rudix .googlecode .com/hg/Ports/rudix/rudix.pv <- 
trimme 
安装 自身 。 P ~:$ sudo Python rudix.py install rudix 
Downloading rudix.googlecode.com/files/rudix-12.10-0.pkg 
[trimmed] Rudix 下 载 并 
installer: The install was successful. 安装 它 白 身 。 
ж A All done 
з ера -15 sudo rudix install redis 
26 о > Downloading rudix .googlecode .com/files/redis-2.6.9-0.pkg 
[trimmed] Rudix 下 载 并 
启动 Redis installer: The install was successful. 安装 Redis- 
服务 器 。 А11 done 
' ~:$ redis-server 
Redis 使 用 默 (699) 6 Feb 21:18:09 4 Warning: по config file specified, using the 
认 配 置 启动 default config. In order to specify a config file use 'redis-server 
a й /path/to/redis.conf' 
并 运行 。 v [699] 6 Feb 21:18:09 % Server started, Redis version 2.6.9 


A (699) 6 Feb 21:18:09 % The server is now ready to accept connections 
on port 6379 
[699] 6 Feb 21:18:09 - 0 clients connected (0 slaves), 922304 bytes 
in use 
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г> ~:8 sudo rudix install pip 
通过 Rudix 安装 名 Downloading rudix.googlecode.com/files/pip-1.1-1.pkg 
а Руф [trimmed] Rudix 正在 
为 pip 的 on 包 installer: The install was successful. 安装 pi 
管理 器 。 ж Pipo 
й A11 done 
~:8 sudo pip install redis 现在 可 以 使 用 pip 来 
Downloading/unpacking redis |< ы е з š 
FERRET сш: a Pip 正在 为 Python 安 | 为 Python 安装 Redis 
UE бохо | Кей 客户 端 库 。 РЕ T o 
~:5 
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UUUUUDusan Majkic[|GitHub|[|[| 
https://github.com/dmajkic/redis/downloadsiIMODEDER 
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003200Аеаіѕ$П00Аеаіѕ0О000000000000А-10000000 
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[к "redis’"32bit"redis-server.exe 


EE ið Jul 21:40:50 H Warning: по config file specified, using the default соп = 
ig. In order to зресіҒу а config file use 'redis-server кранутае а: conf' 
(9361 10 Jul 21:48:50 ~ Server started, Redis version 2.4.5 

19361 10 Jul 21:40:50 # Open data file dump.rdh: Мо such file or directory 

19261 18 Jul 21:40:50 ж The server is now ready to accept connections оп port 63 


19361 ій Jul 21:48:51 — B clients connected CA slaves). 672768 bytes in use 





ПА-1 OWindowsDDDRedis 
А.З.З (jWindowsiifiiiPvthon 


UUUU000UUUUUPython 2.600Python 2.7000000ОРУбпоп 2.7 
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> C:\Users\josiah>c: ipvthonz7ipvthon 


以 交互 模式 Python 2.7.3 (default, Apr 10 2012, 23:31:26) [MSC v.1500 32 bit... 
启动 Python。 Type "help", "copyright", "credits" ог "license" for more information. 
>>> from urllib import urlcpen = 
—=> >>> data = urlopen('http://peak.telecommunity.com/dist/ez setup.py') 
ы fa Ç қ ; 
获取 一 个 能 够 帮助 你 安装 其 从 urllib 模块 里 面 载 人 
他 包 的 模块 。 urlopen 工厂 函数 。 
_ >>> open('ez setup.pv', 'wb').write(data.read()) 4 ; ç ‚ 
通过 执行 内 p >>> ехік() 将 下 载 后 的 模块 写 入 
ELB exit 0 | Р I 硬盘 文件 里 。 
Зв E h > C:\Users\josiah>c:\python27\python ez setup.pv 
函数 来 退出 Downloading http://pvpi.pvthon.org/packages/2.7/8/setuptools/... 
Python 解释 [trimmed] 
器 。 Finished processing dependencies for setuptools==0.6c11 


{тех setup C:NUsersijosiahse:ipvthonz7ipvthon -m easy install redis 


Searching for redi 1 
辅助 模块 。 чани OF жейин ех setup 辅助 模块 会 下 载 
Finished processing dependencies Гог redis 并 安装 setuptools, ТП 
C:\Users\josiah> setuptools 可 以 方便 地 下 
使 用 setuptools 的 easv install 模块 тинен, 


来 下 载 并 安装 Redis。 
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ЗА Redis ИЕ, WRA 





з аи 统 已 经 安装 了 hiredis 这 个 
启动 Python, 并 | 7:7 РУЗЛЮг ~ позне IA Redi 
аи Python 2.6.5 (r265:79063, Apr 16 2010, 13:09:56) C 加 速 库 的 话 ， 那么 Redis £ 

Б ки ІССС 4.4.3) оп linux2 户 端 库 会 自动 使 用 hiredis。 
Redis 的 各 项 功 Type "help", "copyright", "credits" or "license" for more information. 
能 是 否 正常 。 >>> import redis < 

| >>> сопп = redis.Redis() ġ— 创建 一 个 指向 Redis 的 连接 。 
设置 一 个 值 ,然后 >>> conn.set('hello', 'world') 

通过 获取 返回 值 | тезе | 

来 判断 设置 操作 >>> Conn.get ('hello') | 获取 刚刚 
是 否 执行 成 功 。 ыш 设置 的 值 。 
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